CN115222923A - 在漫游制作应用中切换视点的方法、装置、设备和介质 - Google Patents

在漫游制作应用中切换视点的方法、装置、设备和介质 Download PDF

Info

Publication number
CN115222923A
CN115222923A CN202210824798.6A CN202210824798A CN115222923A CN 115222923 A CN115222923 A CN 115222923A CN 202210824798 A CN202210824798 A CN 202210824798A CN 115222923 A CN115222923 A CN 115222923A
Authority
CN
China
Prior art keywords
dimensional
spatial
view
viewpoint
window
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210824798.6A
Other languages
English (en)
Inventor
李闪磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Youzhuju Network Technology Co Ltd
Original Assignee
Beijing Youzhuju Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Youzhuju Network Technology Co Ltd filed Critical Beijing Youzhuju Network Technology Co Ltd
Priority to CN202210824798.6A priority Critical patent/CN115222923A/zh
Publication of CN115222923A publication Critical patent/CN115222923A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

提供了在漫游制作应用中切换视点的方法、装置、设备和介质。在一种方法中,获取分别与空间范围内的一组空间位置相关联的一组全景图像,一组全景图像中的全景图像表示一组空间位置中的空间位置处的周边环境。在漫游制作应用的二维窗口中呈现空间范围的二维视图,二维视图包括空间范围的平面地图以及平面地图中的分别与一组空间位置相关联的一组二维标记。在漫游制作应用的三维窗口中呈现基于一组全景图像生成的三维视图。响应于接收到与一组二维标记中的二维标记的交互,将三维视图的视点切换至与二维标记相关联的空间位置,以便在三维窗口中呈现与空间位置相关联的全景图像。可以便于制作人员切换三维视图的视点,进而提高制作效率。

Description

在漫游制作应用中切换视点的方法、装置、设备和介质
技术领域
本公开的示例性实现方式总体涉及视点切换理,特别地涉及用于在漫游制作应用中切换视点的方法、装置、设备和计算机可读存储介质。
背景技术
随着数字化技术的发展,已经开发出了多种全景漫游应用。制作人员可以在真实空间范围内的多个空间位置处采集图像,并且分别生成与多个空间位置相关联的多个全景图像,进而制作全景漫游数据。可以在全景漫游应用中加载这些全景图像,并且在虚拟空间中进行漫游,以便向用户提供身临其境的三维视觉效果。在制作过程中,制作人员需要在虚拟空间中漫游以便改变视点位置和朝向,从而检查在各个位置处呈现的三维视图是否达到预期效果。此时,如何以更为方便并且快捷的方式切换视点并且尽快地查看各个位置处的三维视觉效果,成为一个亟待解决的问题。
发明内容
在本公开的第一方面,提供了一种用于在漫游制作应用中切换视点的方法。在该方法中,获取分别与空间范围内的一组空间位置相关联的一组全景图像,一组全景图像中的全景图像表示一组空间位置中的空间位置处的周边环境。在漫游制作应用的二维窗口中呈现空间范围的二维视图,二维视图包括空间范围的平面地图以及平面地图中的分别与一组空间位置相关联的一组二维标记。在漫游制作应用的三维窗口中呈现基于一组全景图像生成的三维视图。响应于接收到与一组二维标记中的二维标记的交互,将三维视图的视点切换至与二维标记相关联的空间位置,以便在三维窗口中呈现与空间位置相关联的全景图像。
在本公开的第二方面,提供了一种用于在漫游制作应用中切换视点的装置。该装置包括:获取模块,被配置用于获取分别与空间范围内的一组空间位置相关联的一组全景图像,一组全景图像中的全景图像表示一组空间位置中的空间位置处的周边环境;二维呈现模块,被配置用于在漫游制作应用的二维窗口中呈现空间范围的二维视图,二维视图包括空间范围的平面地图以及平面地图中的分别与一组空间位置相关联的一组二维标记;三维呈现模块,被配置用于在漫游制作应用的三维窗口中呈现基于一组全景图像生成的三维视图;以及切换模块,被配置用于响应于接收到与一组二维标记中的二维标记的交互,将三维视图的视点切换至与二维标记相关联的空间位置,以便在三维窗口中呈现与空间位置相关联的全景图像。
在本公开的第三方面,提供了一种电子设备。该电子设备包括:至少一个处理单元;以及至少一个存储器,至少一个存储器被耦合到至少一个处理单元并且存储用于由至少一个处理单元执行的指令,指令在由至少一个处理单元执行时使设备执行根据本公开第一方面的方法。
在本公开的第四方面,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序在被处理器执行时使处理器实现根据本公开第一方面的方法。
应当理解,本发明内容部分中所描述的内容并非旨在限定本公开的实现方式的关键特征或重要特征,也不用于限制本公开的范围。本公开的其他特征将通过以下的描述而变得容易理解。
附图说明
在下文中,结合附图并参考以下详细说明,本公开各实现方式的上述和其他特征、优点及方面将变得更加明显。在附图中,相同或相似的附图标记表示相同或相似的元素,其中:
图1示出了本公开的实现方式能够在其中实现的示例环境的框图;
图2示出了根据本公开的一些实现方式的用于在漫游制作应用中切换视点的过程的框图;
图3示出了根据本公开的一些实现方式的在二维窗口中呈现二维标记的过程的框图。
图4示出了根据本公开的一些实现方式的用于在三维窗口中切换视点的过程的框图;
图5示出了根据本公开的一些实现方式的用于在漫游制作应用中呈现物料信息的过程的框图;
图6示出了根据本公开的一些实现方式的用于呈现包括敏感信息的全景图像的过程的框图;
图7示出了根据本公开的一些实现方式的用于呈现已经去除敏感信息的全景图像的过程的框图;
图8示出了根据本公开的一些实现方式的用于在漫游制作应用中切换视点的过程的框图;
图9示出了根据本公开的一些实现方式的用于在三维窗口中漫游的过程的框图;
图10示出了根据本公开的一些实现方式的用于在漫游制作应用中切换视点的方法的流程图;
图11示出了根据本公开的一些实现方式的用于在漫游制作应用中切换视点的装置的框图;以及
图12示出了能够实施本公开的多个实现方式的设备的框图。
具体实施方式
下面将参照附图更详细地描述本公开的实现方式。虽然附图中示出了本公开的某些实现方式,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实现方式,相反,提供这些实现方式是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实现方式仅用于示例性作用,并非用于限制本公开的保护范围。
在本公开的实现方式的描述中,术语“包括”及其类似用语应当理解为开放性包含,即“包括但不限于”。术语“基于”应当理解为“至少部分地基于”。术语“一个实现方式”或“该实现方式”应当理解为“至少一个实现方式”。术语“一些实现方式”应当理解为“至少一些实现方式”。下文还可能包括其他明确的和隐含的定义。如本文中所使用的,术语“模型”可以表示各个数据之间的关联关系。例如,可以基于目前已知的和/或将在未来开发的多种技术方案来获取上述关联关系。
可以理解的是,本技术方案所涉及的数据(包括但不限于数据本身、数据的获取或使用)应当遵循相应法律法规及相关规定的要求。
可以理解的是,在使用本公开各实施例公开的技术方案之前,均应当根据相关法律法规通过适当的方式对本公开所涉及个人信息的类型、使用范围、使用场景等告知用户并获得用户的授权。
例如,在响应于接收到用户的主动请求时,向用户发送提示信息,以明确地提示用户,其请求执行的操作将需要获取和使用到用户的个人信息。从而,使得用户可以根据提示信息来自主地选择是否向执行本公开技术方案的操作的电子设备、应用程序、服务器或存储介质等软件或硬件提供个人信息。
作为一种可选的但非限制性的实现方式,响应于接收到用户的主动请求,向用户发送提示信息的方式,例如可以是弹出窗口的方式,弹出窗口中可以以文字的方式呈现提示信息。此外,弹出窗口中还可以承载供用户选择“同意”或“不同意”向电子设备提供个人信息的选择控件。
可以理解的是,上述通知和获取用户授权过程仅是示意性的,不对本公开的实现方式构成限定,其他满足相关法律法规的方式也可应用于本公开的实现方式中。
示例环境
目前已经开发出了多种全景漫游应用。制作人员可以在真实空间范围内的多个空间位置处采集图像,并且分别生成与多个空间位置相关联的多个全景图像,进而制作全景漫游数据。首先参见图1描述全景漫游应用的概要,图1示出了本公开的实现方式能够在其中实现的示例环境100的框图。如图1所示,可以在全景漫游应用110中分别呈现某个空间范围(例如,一套住宅)内的多个空间位置的全景图像。具体地,可以呈现平面地图120,并且呈现从视点122处观看的三维视图130。用户可以在全景漫游应用110中漫游,以便观看住宅内部的各个空间位置的全景图像。
目前已经开发出了用于制作全景图像的多种漫游制作应用。制作人员可以借助于全景漫游应用来组织在空间范围内的多个空间位置处采集的视图图像,进而生成分别与多个位置相关联的多个全景图像。在发布全景图像之前,制作人员需要在三维视图中漫游,以便确保在到达空间范围内的各个位置时,都可以看到满意的全景视图。
此时,制作人员需要手工操作三维视图来达空间范围内的各个位置,进而查看相应的全景视图是否符合标准。由于空间范围通常具有复杂的结构(例如,包括墙壁等障碍物),这导致制作人员需要进行复杂的操作以便到达空间范围内的各个位置。此时,如何以更为方便并且快捷的方式切换视点进而更快地查看各个位置处的三维视觉效果,成为一个亟待解决的问题。
视点切换的概要过程
为了解决上述技术方案中的不足,根据本公开的一个示例性实现方式,提出了一种用于在漫游制作应用中切换视点的方法。在下文中,参见图2描述有关视点切换的概要,该图2示出了根据本公开的一些实现方式的用于在漫游制作应用中切换视点的过程的框图200。如图2所示,空间范围210可以包括多个空间位置212、214、…、以及216,每个空间位置可以具有相关联的全景图像。例如,空间位置212可以具有相关联的全景图像218,并且该全景图像218可以表示在空间位置212处所采集的周边环境。
将会理解,在此的全景图像218可以是基于在空间位置212处采集的多个视图图像(例如,前视图、后视图、左视图、右视图、上视图以及下视图)来生成的。可以利用全景视图采集设备来获取全景视图218。制作人员可以利用漫游制作应用来组合与不同空间位置相关联的全景图像,进而生成可以用于由漫游应用加载的全景漫游数据。
根据本公开的一个示例性实现方式,可以分别获取与空间范围210内的一组空间位置212、214、…、以及216相关联的一组全景图像。此时,每个全景图像表示一个空间位置处的周边环境。如图2所示,漫游制作应用可以包括二维窗口220和三维窗口230。具体地,可以在二维窗口220中呈现空间范围的二维视图,并且可以在三维窗口230中呈现空间范围的二维视图222。
二维视图可以包括:空间范围210的平面地图228;以及平面地图228中的分别与一组空间位置212、214、…、以及216相关联的一组二维标记222、224、…、以及226。可以并列地呈现二维窗口220和三维窗口230,可以在三维窗口230中呈现基于一组全景图像生成的三维视图232。在此,制作人员可以在三维窗口230中漫游,到达空间范围内的各个位置,并且查看各个位置处的相应三维视图是否满足期望条件。
为了便于支持在漫游制作应用中快速切换视点,可以基于制作人员在二维窗口220中的交互来切换三维视图222的视点。具体地,如果接收到制作人员与某个二维标记(例如,二维标记222)的交互,则可以将三维视图232的视点切换至与二维标记222相对应的空间位置212。由此,可以在三维窗口220中呈现与空间位置212相关联的全景图像218。
在本公开的上下文中,漫游制作应用的用户是制作人员而并非全景漫游应用110的终端用户,并且空间位置212、214、…、以及216并非空间范围210中的任意位置,而是用于采集并合成全景图像的采集点位。根据本公开的一个示例性实现方式,可以在空间范围210中的空间位置212、214、…、以及216、平面地图228中的二维标记222、224、…、以及226、以及三维窗口220中的相应视点之间建立关联关系。以此方式,可以便于制作者来更为简单并且快速地切换三维视图232的视点,进而以更为有效的方式检查在三维窗口220中显示的与各个空间位置相关联的全景图像是否符合期望。
进一步,通过在漫游制作应用中并列地显示二维窗口220和三维窗口230,制作人员可以同时查看并且比较两个窗口的显示内容,从而相应地调整全景图像中的问题。以此方式,可以提高制作人员的工作效率,进而确保能够以更为准确和有效的方式生成全景漫游数据。
视点切换的详细过程
已经参见图2描述视点切换的概要,在下文中,将描述有关在漫游制作应用中切换视点的更多细节。图3示出了根据本公开的一些实现方式的在二维窗口中呈现二维标记的过程的框图300。如图3所示,可以在二维窗口220中呈现空间范围210的平面地图228。进一步,可以确定在平面地图228中的何处显示对应于空间位置212的二维标记222。
根据本公开的一个示例性实现方式,可以基于多种方式来建立参考坐标系。例如,可以将空间范围210中的左下角所示的顶点作为参考坐标系312的原点310,并按照如图3所示的箭头方向分别建立x、y和z坐标轴。此时,空间范围210中的空间位置212的位置可以表示为(X1,Y1,Z1)。进一步,可以在二维窗口220中建立对应于坐标系312的坐标系322。假设平面地图228的左下角顶点对应于空间范围210中的原点310,则可以将该顶点作为原点320并且建立平面地图228的坐标系322。此时,坐标系322仅包括x和y两个坐标轴,并且对应于空间位置212的二维标记222的坐标可以表示为(X1,Y1)(也即,不考虑高度轴z的坐标)。
进一步,可以在平面地图228中的位置(X1,Y1)处呈现二维标记222。可以基于多种样式来呈现二维标记,例如,可以利用图3所示的圆形来表示二维标记222。利用本公开的示例性实现方式,可以基于简单的几何计算来确定空间位置212和二维标记的坐标之间的对应关系,进而在漫游制作应用的二维窗口220中呈现对应于各个空间位置的二维标记。以此方式,可以便于制作人员了解空间位置的二维分布,进而便于通过点击(例如,制作人员可以利用鼠标和/或手指等单击或者双击,等等)各个二维标记来将三维视图232的视点切换至相应的空间位置。
将会理解,上文仅以空间范围210中的空间位置212作为示例描述了呈现二维标记222的过程,根据本公开的一个示例性实现方式,可以基于类似方式来处理空间范围210中的其他空间位置214、…、以及216,进而在二维窗口220中呈现与各个空间位置214、…、以及216相对应的二维标记222、…、以及226。
在下文中,将返回图2描述有关视点切换的更多细节。在初始过程中,可以将三维视图232的视点设置为预定初始位置(例如,空间范围210的入口位置或者中心位置,等等)。制作人员可以在三维窗口230中漫游,以便浏览期望位置的周边环境。进一步,制作人员可以点击二维窗口220中的任意二维标记以便实现视点切换。
如图2所示,如果接收到制作人员与二维标记222的交互,则可以将三维视图232的视点切换至对应于二维标记222的位置。如图2右侧示出,此时三维视图232的视点可以位于客厅中央。以此方式,制作人员可以快速地将视点移动至期望的位置,以便查看该位置的周边环境。
根据本公开的一个示例性实现方式,可以基于多种方式来确定视点的朝向。例如,可以将三维视图232的当前视点的朝向作为切换后的视点的朝向。具体地,假设切换前的视点朝向为向前,则可以将视点切换至与二维标记222相对应的空间位置212,并且保持视点朝向不变。又例如,可以将视点的朝向切换至与空间位置相关联的预定朝向。根据本公开的一个示例性实现方式,可以为每个空间位置指定默认朝向,例如,可以将从该空间位置可见的具有最佳视觉效果的方向设置为默认朝向。备选地和/或附加地,可以将从该空间位置可以看到最远距离的方向设置为默认朝向,等等。
利用本公开的示例性实现方式,可以灵活配置视点的朝向,进而便于制作人员检查各个位置处的全景图像。进一步,制作人员可以利用鼠标和/或键盘来控制视点。例如,可以利用特定快捷键来实现旋转操作,以便查看该位置周围的360°全景视图。又例如,可以通过拖拽等方式来向各个方向移动视点。以此方式,可以提高制作人员在空间范围210内的漫游速度,进而提高全景图制作的效率。
根据本公开的一个示例性实现方式,可以允许制作人员点击平面地图228中的其他二维标记。图4示出了根据本公开的一些实现方式的用于在三维窗口230中切换视点的过程的框图400。如图4所示,如果接收到制作人员与二维标记224的交互,则可以将三维视图232切换至空间范围210中的空间位置214。此时,三维视图232将显示过道的周边环境。
根据本公开的一个示例性实现方式,可以在漫游制作应用中提供有关全景图像的制作物料的信息。参见图5描述呈现物料信息的更多细节,该图5示出了根据本公开的一些实现方式的用于在漫游制作应用中呈现物料信息的过程的框图500。如图5所示,可以呈现物料窗口510,以便呈现用于生成与二维标记222相关联的全景图像的各种制作物料的信息。
在此,制作物料例如可以包括用于生成全景图像的多个视图图像512,制作人员可以点击视图图像512以便查看和/或编辑用于生成全景图像的各个角度的原始图像。又例如,制作物料可以进一步包括空间位置的描述信息514。在此,描述信息可以包括空间位置所在的区域(例如“客厅”),并且可以进一步提供有关客厅的更多信息。制作人员可以点击描述信息514以便查看和/或编辑用于描述全景图像的各种文字描述。
将会理解,尽管图5以重叠在三维窗口230之上的弹出窗口示出了物料窗口510。根据本公开的一个示例性实现方式,可以在漫游制作应用的其他位置处示出物料窗口510。备选地和/或附加地,可以允许制作人员移动该物料窗口510。利用本公开的示例性实现方式,在制作漫游数据的过程中,可以便于制作人员随时编辑与各个空间位置相关联的制作物料,并且利用编辑后的制作物料生成用于在三维窗口230内呈现的全景图像。
根据本公开的一个示例性实现方式,可以利用具有不同样式的二维标记222来表示不同状态的物料信息。例如,视图图像512中可能会包括诸如人像、文字等敏感信息。在制作全景漫游数据时应当去除这些敏感信息。在下文中,参见图6描述有关处理敏感信息的更多细节,该图6示出了根据本公开的一些实现方式的用于呈现包括敏感信息的全景图像的过程的框图600。如图6所示,三维视图232包括敏感信息610(即,人像),如果直接发布包括敏感信息610的全景漫游数据,则可能会导致泄漏个人隐私的风险。
根据本公开的一个示例性实现方式,可以基于图像识别技术来自动检测并标记潜在敏感信息610。备选地和/或附加地,可以接收制作人员人工标注的敏感信息610。此时,如果三维视图232和/或在视图图像中发现敏感信息610,则可以以不同的样式来呈现二维标记222。如图6所示,可以利用星形来表示包括敏感信息610的二维标记222。
利用本公开的示例性实现方式,二维窗口220中的用于指示各个二维标记的不同样式可以向制作人员提供与各个空间位置相关的全景图像的制作状态。以此方式,制作人员可以直接基于二维标记的样式来确定还要处理哪些空间位置处的敏感信息。
在下文中,参见图7描述有关处理敏感信息的更多操作,该图7示出了根据本公开的一些实现方式的用于呈现已经去除敏感信息的全景图像的过程的框图700。如图7所示,根据本公开的一个示例性实现方式,可以针对敏感信息610进行模糊处理,并且形成相应的掩膜图像710。可以利用掩膜图像710更新相应的视图图像,进而生成包括掩膜图像710的三维视图232。
此时,在确定视图图像中的敏感信息已经被处理的情况下,可以利用例如菱形的另一样式来呈现二维标记222。进一步,在三维窗口220中可以呈现利用经处理的视图图像生成的与空间位置相关联的新的全景图像。在此,三维视图232不再包括敏感信息,而是包括利用马赛克进行模糊处理后的掩膜图像710。
利用本公开的示例性实现方式,二维标记的样式可以向制作人员指示与各个空间位置相关联的全景图像的相关状态。此时,如果制作人员发现以星形表示的全部二维标记都被更新为以菱形表示,则可以确定已经处理了全景漫游数据中的全部敏感信息。以此方式,可以便于制作人员直接基于二维窗口220中的显示样式来确定全景漫游数据是否包括敏感信息。
根据本公开的一个示例性实现方式,在视点切换过程中,可以在漫游制作应用中的二维窗口220和三维窗口230中呈现更多信息。图8示出了根据本公开的一些实现方式的用于在漫游制作应用中切换视点的过程的框图800。如图8所示,可以在二维窗口220中呈现与三维视图232的视点相对应的二维视锥810。二维视锥810可以在平面地图228中表示二维标记222的具体位置以及视点的朝向。在图8中,二维视锥810的顶点可以表示二维标记222的位置,并且扇形的朝向可以表示视点的朝向。以此方式,在全景漫游数据的制作过程中,可以便于制作人员随时了解三维视图232的视点朝向与平面地图228的关系,进而便于制作人员随时调整制作过程并且提高制作效率。
根据本公开的一个示例性实现方式,可以在三维窗口230中分别呈现与各个空间位置相对应的三维标记。如图8所示,可以在三维视图232中呈现对应于二维标记224的三维标记820。以此方式,可以便于制作人员确定空间位置在二维窗口220和三维窗口230中的位置,进而相应地调整制作过程。
根据本公开的一个示例性实现方式,允许制作人员在三维窗口230中与三维标记820进行交互。例如,制作人员可以通过点击三维标记820,来将三维视图232切换至对应于二维标记224的空间位置214。此时,可以在三维窗口230中呈现与空间位置224相关联的全景图像。以此方式,可以以更为方便并且有效的方式支持制作人员经由三维视图232来切换视点。
根据本公开的一个示例性实现方式,允许制作人员在三维窗口230中执行漫游。具体地,如果在三维窗口230中检测到漫游动作,则可以更新三维视图232的视点的位置。备选地和/或附加地,可以进一步更新三维视图232的视点的朝向。图9示出了根据本公开的一些实现方式的在三维窗口230中漫游的过程的框图900。如图9所示,漫游制作应用可以接收制作人员在三维窗口230中的漫游动作,并且显示三维视图232。相应地,在二维窗口220中,可以基于三维视图232的更新后的视点,在二维窗口220中更新相对应的二维视锥910。例如,二维视锥910前进至洗漱间附近,并且朝向洗漱间的化妆镜。
利用本公开的示例性实现方式,二维窗口220和三维窗口230可以共享三维视图232的视点的位置和朝向。以此方式,可以在二维窗口220中实时地更新二维视锥910的位置和朝向,进而在平面地图228中明确地显示三维视图232的视点的位置和朝向。由此,可以便于制作人员以更为方便并且快捷的方式浏览各个空间位置的相关全景图像,进而提高制作效率。
将会理解,尽管上文附图中以室内的户型环境为示例描述了根据本公开的一个示例性实现方式的技术方案,备选地和/或附加地,可以在其他应用环境中实现上述技术方案。例如,在博物馆导览环境中,可以在博物馆的内部环境中的多个空间位置处拍摄多个视图图像,并且分别生成与多个空间位置相关联的多个全景图像。可以在漫游制作应用中执行上文描述的方法,以便生成并且检查将被博物馆导览应用所调用的全景漫游数据。又例如,可以将上文描述的方法应用于室外环境。可以在室外景点的多个空间位置处拍摄多个视图图像,并且在漫游制作应用中调用上文描述的方法,以便辅助制作全景漫游数据。
示例过程
图10示出了根据本公开的一些实现方式的用于在漫游制作应用中切换视点的方法1000的流程图。具体地,在框1010处,获取分别与空间范围内的一组空间位置相关联的一组全景图像,一组全景图像中的全景图像表示一组空间位置中的空间位置处的周边环境。在框1020处,在漫游制作应用的二维窗口中呈现空间范围的二维视图,二维视图包括空间范围的平面地图以及平面地图中的分别与一组空间位置相关联的一组二维标记。在框1030处,在漫游制作应用的三维窗口中呈现基于一组全景图像生成的三维视图。在框1040处,响应于接收到与一组二维标记中的二维标记的交互,将三维视图的视点切换至与二维标记相关联的空间位置,以便在三维窗口中呈现与空间位置相关联的全景图像。
根据本公开的一个示例性实现方式,呈现二维视图包括:在二维窗口中呈现空间范围的平面地图;以及在平面地图中的分别与一组空间位置相对应的一组平面位置处,基于第一样式呈现一组二维标记。
根据本公开的一个示例性实现方式,进一步包括:响应于接收到与二维标记的交互,确定全景图像的制作物料,制作物料包括以下至少任一项:用于生成全景图像的多个视图图像、空间位置的描述信息;以及呈现制作物料的相关信息。
根据本公开的一个示例性实现方式,呈现二维视图进一步包括:响应于确定多个视图图像包括敏感信息,基于不同于第一样式的第二样式,呈现二维标记。
根据本公开的一个示例性实现方式,进一步包括:响应于确定多个视图图像中的敏感信息已经被处理,基于不同于第一样式和第二样式的第三样式,呈现二维标记;以及在三维窗口中呈现与空间位置相关联的新的全景图像,新的全景图像是利用经处理的多个视图图像生成的。
根据本公开的一个示例性实现方式,在三维窗口中呈现全景图像包括:基于以下至少任一项来确定三维视图的视点的朝向:视点切换之前的三维视图的视点的朝向、与空间位置相关联的预定朝向;以及基于视点的朝向来呈现全景图像。
根据本公开的一个示例性实现方式,在二维窗口中呈现二维视图进一步包括:在二维窗口中呈现与三维视图的视点相对应的二维视锥;以及其中在三维窗口中呈现三维视图进一步包括:在三维窗口中呈现分别与一组空间位置相对应的一组三维标记。
根据本公开的一个示例性实现方式,进一步包括:响应于接收到与一组三维标记中的三维标记的交互,将三维视图的视点切换至与三维标记相对应的空间位置,以便在三维窗口中呈现与空间位置相关联的全景图像。
根据本公开的一个示例性实现方式,进一步包括:响应于在三维窗口中检测到漫游动作,更新三维视图的视点的位置和朝向中的至少任一项;以及基于三维视图的更新的视点,在二维窗口中更新二维视锥。
示例装置和设备
图11示出了根据本公开的一些实现方式的用于在漫游制作应用中切换视点的装置1100的框图。该装置1100包括:获取模块1110,被配置用于获取分别与空间范围内的一组空间位置相关联的一组全景图像,一组全景图像中的全景图像表示一组空间位置中的空间位置处的周边环境;二维呈现模块1120,被配置用于在漫游制作应用的二维窗口中呈现空间范围的二维视图,二维视图包括空间范围的平面地图以及平面地图中的分别与一组空间位置相关联的一组二维标记;三维呈现模块1130,被配置用于在漫游制作应用的三维窗口中呈现基于一组全景图像生成的三维视图;以及切换模块1140,被配置用于响应于接收到与一组二维标记中的二维标记的交互,将三维视图的视点切换至与二维标记相关联的空间位置,以便在三维窗口中呈现与空间位置相关联的全景图像。
根据本公开的一个示例性实现方式,二维呈现模块1120包括:地图呈现模块,被配置用于在二维窗口中呈现空间范围的平面地图;以及标记呈现模块,被配置用于在平面地图中的分别与一组空间位置相对应的一组平面位置处,基于第一样式呈现一组二维标记。
根据本公开的一个示例性实现方式,该装置1100进一步包括:确定模块,被配置用于响应于接收到与二维标记的交互,确定全景图像的制作物料,制作物料包括以下至少任一项:用于生成全景图像的多个视图图像、空间位置的描述信息;以及信息呈现模块,被配置用于呈现制作物料的相关信息。
根据本公开的一个示例性实现方式,二维呈现模块1120进一步包括:敏感样式呈现模块,被配置用于响应于确定多个视图图像包括敏感信息,基于不同于第一样式的第二样式,呈现二维标记。
根据本公开的一个示例性实现方式,该装置1100进一步包括:掩膜样式呈现模块,被配置用于响应于确定多个视图图像中的敏感信息已经被处理,基于不同于第一样式和第二样式的第三样式,呈现二维标记;以及更新图像呈现模块,被配置用于在三维窗口中呈现与空间位置相关联的新的全景图像,新的全景图像是利用经处理的多个视图图像生成的。
根据本公开的一个示例性实现方式,三维呈现模块1130包括:朝向确定模块,被配置用于基于以下至少任一项来确定三维视图的视点的朝向:视点切换之前的三维视图的视点的朝向、与空间位置相关联的预定朝向;以及基于朝向的呈现模块,被配置用于基于视点的朝向来呈现全景图像。
根据本公开的一个示例性实现方式,二维呈现模块1120进一步包括:视锥呈现模块,被配置用于在二维窗口中呈现与三维视图的视点相对应的二维视锥;以及其中三维呈现模块进一步包括:三维标记呈现模块,被配置用于在三维窗口中呈现分别与一组空间位置相对应的一组三维标记。
根据本公开的一个示例性实现方式,该装置1100进一步包括:三维切换模块,被配置用于响应于接收到与一组三维标记中的三维标记的交互,将三维视图的视点切换至与三维标记相对应的空间位置,以便在三维窗口中呈现与空间位置相关联的全景图像。
根据本公开的一个示例性实现方式,该装置1100进一步包括:视点更新模块,被配置用于响应于在三维窗口中检测到漫游动作,更新三维视图的视点的位置和朝向中的至少任一项;以及视锥更新模块,被配置用于基于三维视图的更新的视点,在二维窗口中更新二维视锥。
图12示出了能够实施本公开的多个实现方式的设备1200的框图。应当理解,图12所示出的计算设备1200仅仅是示例性的,而不应当构成对本文所描述的实现方式的功能和范围的任何限制。图12所示出的计算设备1200可以用于实现上文描述的方法。
如图12所示,计算设备1200是通用计算设备的形式。计算设备1200的组件可以包括但不限于一个或多个处理器或处理单元1210、存储器1220、存储设备1230、一个或多个通信单元1240、一个或多个输入设备1250以及一个或多个输出设备1260。处理单元1210可以是实际或虚拟处理器并且能够根据存储器1220中存储的程序来执行各种处理。在多处理器系统中,多个处理单元并行执行计算机可执行指令,以提高计算设备1200的并行处理能力。
计算设备1200通常包括多个计算机存储介质。这样的介质可以是计算设备1200可访问的任何可以获得的介质,包括但不限于易失性和非易失性介质、可拆卸和不可拆卸介质。存储器1220可以是易失性存储器(例如寄存器、高速缓存、随机访问存储器(RAM))、非易失性存储器(例如,只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、闪存)或它们的某种组合。存储设备1230可以是可拆卸或不可拆卸的介质,并且可以包括机器可读介质,诸如闪存驱动、磁盘或者任何其他介质,其可以能够用于存储信息和/或数据(例如用于训练的训练数据)并且可以在计算设备1200内被访问。
计算设备1200可以进一步包括另外的可拆卸/不可拆卸、易失性/非易失性存储介质。尽管未在图12中示出,可以提供用于从可拆卸、非易失性磁盘(例如“软盘”)进行读取或写入的磁盘驱动和用于从可拆卸、非易失性光盘进行读取或写入的光盘驱动。在这些情况中,每个驱动可以由一个或多个数据介质接口被连接至总线(未示出)。存储器1220可以包括计算机程序产品1225,其具有一个或多个程序模块,这些程序模块被配置为执行本公开的各种实现方式的各种方法或动作。
通信单元1240实现通过通信介质与其他计算设备进行通信。附加地,计算设备1200的组件的功能可以以单个计算集群或多个计算机器来实现,这些计算机器能够通过通信连接进行通信。因此,计算设备1200可以使用与一个或多个其他服务器、网络个人计算机(PC)或者另一个网络节点的逻辑连接来在联网环境中进行操作。
输入设备1250可以是一个或多个输入设备,例如鼠标、键盘、追踪球等。输出设备1260可以是一个或多个输出设备,例如显示器、扬声器、打印机等。计算设备1200还可以根据需要通过通信单元1240与一个或多个外部设备(未示出)进行通信,外部设备诸如存储设备、显示设备等,与一个或多个使得用户与计算设备1200交互的设备进行通信,或者与使得计算设备1200与一个或多个其他计算设备通信的任何设备(例如,网卡、调制解调器等)进行通信。这样的通信可以经由输入/输出(I/O)接口(未示出)来执行。
根据本公开的示例性实现方式,提供了一种计算机可读存储介质,其上存储有计算机可执行指令,其中计算机可执行指令被处理器执行以实现上文描述的方法。根据本公开的示例性实现方式,还提供了一种计算机程序产品,计算机程序产品被有形地存储在非瞬态计算机可读介质上并且包括计算机可执行指令,而计算机可执行指令被处理器执行以实现上文描述的方法。根据本公开的示例性实现方式,提供了一种计算机程序产品,其上存储有计算机程序,程序被处理器执行时实现上文描述的方法。
这里参照根据本公开实现的方法、装置、设备和计算机程序产品的流程图和/或框图描述了本公开的各个方面。应当理解,流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合,都可以由计算机可读程序指令实现。
这些计算机可读程序指令可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理单元,从而生产出一种机器,使得这些指令在通过计算机或其他可编程数据处理装置的处理单元执行时,产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中,这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作,从而,存储有指令的计算机可读介质则包括一个制造品,其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。
可以把计算机可读程序指令加载到计算机、其他可编程数据处理装置、或其他设备上,使得在计算机、其他可编程数据处理装置或其他设备上执行一系列操作步骤,以产生计算机实现的过程,从而使得在计算机、其他可编程数据处理装置、或其他设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。
附图中的流程图和框图显示了根据本公开的多个实现的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分,模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
以上已经描述了本公开的各实现,上述说明是示例性的,并非穷尽性的,并且也不限于所公开的各实现。在不偏离所说明的各实现的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实现的原理、实际应用或对市场中的技术的改进,或者使本技术领域的其他普通技术人员能理解本文公开的各个实现方式。

Claims (20)

1.一种用于在漫游制作应用中切换视点的方法,包括:
获取分别与空间范围内的一组空间位置相关联的一组全景图像,所述一组全景图像中的全景图像表示所述一组空间位置中的空间位置处的周边环境;
在所述漫游制作应用的二维窗口中呈现所述空间范围的二维视图,所述二维视图包括所述空间范围的平面地图以及所述平面地图中的分别与所述一组空间位置相关联的一组二维标记;
在所述漫游制作应用的三维窗口中呈现基于所述一组全景图像生成的三维视图;以及
响应于接收到与所述一组二维标记中的二维标记的交互,将所述三维视图的视点切换至与所述二维标记相关联的空间位置,以便在所述三维窗口中呈现与所述空间位置相关联的全景图像。
2.根据权利要求1的所述方法,其中呈现所述二维视图包括:
在所述二维窗口中呈现所述空间范围的所述平面地图;以及
在所述平面地图中的分别与所述一组空间位置相对应的一组平面位置处,基于第一样式呈现所述一组二维标记。
3.根据权利要求2的所述方法,进一步包括:响应于接收到与所述二维标记的交互,
确定所述全景图像的制作物料,所述制作物料包括以下至少任一项:用于生成所述全景图像的多个视图图像、所述空间位置的描述信息;以及
呈现所述制作物料的相关信息。
4.根据权利要求3的所述方法,其中呈现所述二维视图进一步包括:响应于确定所述多个视图图像包括敏感信息,基于不同于所述第一样式的第二样式,呈现所述二维标记。
5.根据权利要求4的所述方法,进一步包括:
响应于确定所述多个视图图像中的所述敏感信息已经被处理,基于不同于所述第一样式和所述第二样式的第三样式,呈现所述二维标记;以及
在所述三维窗口中呈现与所述空间位置相关联的新的全景图像,所述新的全景图像是利用经处理的所述多个视图图像生成的。
6.根据权利要求1的所述方法,其中在所述三维窗口中呈现所述全景图像包括:
基于以下至少任一项来确定所述三维视图的视点的朝向:所述视点切换之前的三维视图的视点的朝向、与所述空间位置相关联的预定朝向;以及
基于所述视点的所述朝向来呈现所述全景图像。
7.根据权利要求6的所述方法,其中在所述二维窗口中呈现所述二维视图进一步包括:在所述二维窗口中呈现与所述三维视图的所述视点相对应的二维视锥;以及
其中在所述三维窗口中呈现所述三维视图进一步包括:在所述三维窗口中呈现分别与所述一组空间位置相对应的一组三维标记。
8.根据权利要求7的所述方法,进一步包括:响应于接收到与所述一组三维标记中的三维标记的交互,将所述三维视图的所述视点切换至与所述三维标记相对应的空间位置,以便在所述三维窗口中呈现与所述空间位置相关联的全景图像。
9.根据权利要求7的所述方法,进一步包括:响应于在所述三维窗口中检测到漫游动作,
更新所述三维视图的所述视点的位置和朝向中的至少任一项;以及
基于所述三维视图的更新的所述视点,在所述二维窗口中更新所述二维视锥。
10.一种用于在漫游制作应用中切换视点的装置,包括:
获取模块,被配置用于获取分别与空间范围内的一组空间位置相关联的一组全景图像,所述一组全景图像中的全景图像表示所述一组空间位置中的空间位置处的周边环境;
二维呈现模块,被配置用于在所述漫游制作应用的二维窗口中呈现所述空间范围的二维视图,所述二维视图包括所述空间范围的平面地图以及所述平面地图中的分别与所述一组空间位置相关联的一组二维标记;
三维呈现模块,被配置用于在所述漫游制作应用的三维窗口中呈现基于所述一组全景图像生成的三维视图;以及
切换模块,被配置用于响应于接收到与所述一组二维标记中的二维标记的交互,将所述三维视图的视点切换至与所述二维标记相关联的空间位置,以便在所述三维窗口中呈现与所述空间位置相关联的全景图像。
11.根据权利要求10的所述装置,其中所述二维呈现模块包括:
地图呈现模块,被配置用于在所述二维窗口中呈现所述空间范围的所述平面地图;以及
标记呈现模块,被配置用于在所述平面地图中的分别与所述一组空间位置相对应的一组平面位置处,基于第一样式呈现所述一组二维标记。
12.根据权利要求11的所述装置,进一步包括:
确定模块,被配置用于响应于接收到与所述二维标记的交互,确定所述全景图像的制作物料,所述制作物料包括以下至少任一项:用于生成所述全景图像的多个视图图像、所述空间位置的描述信息;以及
信息呈现模块,被配置用于呈现所述制作物料的相关信息。
13.根据权利要求12的所述装置,其中所述二维呈现模块进一步包括:敏感样式呈现模块,被配置用于响应于确定所述多个视图图像包括敏感信息,基于不同于所述第一样式的第二样式,呈现所述二维标记。
14.根据权利要求13的所述装置,进一步包括:
掩膜样式呈现模块,被配置用于响应于确定所述多个视图图像中的所述敏感信息已经被处理,基于不同于所述第一样式和所述第二样式的第三样式,呈现所述二维标记;以及
更新图像呈现模块,被配置用于在所述三维窗口中呈现与所述空间位置相关联的新的全景图像,所述新的全景图像是利用经处理的所述多个视图图像生成的。
15.根据权利要求10的所述装置,其中所述三维呈现模块包括:
朝向确定模块,被配置用于基于以下至少任一项来确定所述三维视图的视点的朝向:所述视点切换之前的三维视图的视点的朝向、与所述空间位置相关联的预定朝向;以及
基于朝向的呈现模块,被配置用于基于所述视点的所述朝向来呈现所述全景图像。
16.根据权利要求15的所述装置,其中所述二维呈现模块进一步包括:视锥呈现模块,被配置用于在所述二维窗口中呈现与所述三维视图的所述视点相对应的二维视锥;以及
其中所述三维呈现模块进一步包括:三维标记呈现模块,被配置用于在所述三维窗口中呈现分别与所述一组空间位置相对应的一组三维标记。
17.根据权利要求16的所述装置,进一步包括:三维切换模块,被配置用于响应于接收到与所述一组三维标记中的三维标记的交互,将所述三维视图的所述视点切换至与所述三维标记相对应的空间位置,以便在所述三维窗口中呈现与所述空间位置相关联的全景图像。
18.根据权利要求15的所述装置,进一步包括:
视点更新模块,被配置用于响应于在所述三维窗口中检测到漫游动作,更新所述三维视图的所述视点的位置和朝向中的至少任一项;以及
视锥更新模块,被配置用于基于所述三维视图的更新的所述视点,在所述二维窗口中更新所述二维视锥。
19.一种电子设备,包括:
至少一个处理单元;以及
至少一个存储器,所述至少一个存储器被耦合到所述至少一个处理单元并且存储用于由所述至少一个处理单元执行的指令,所述指令在由所述至少一个处理单元执行时使所述电子设备执行根据权利要求1至9中任一项所述的方法。
20.一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序在被处理器执行时使所述处理器实现根据权利要求1至9中任一项所述的方法。
CN202210824798.6A 2022-07-13 2022-07-13 在漫游制作应用中切换视点的方法、装置、设备和介质 Pending CN115222923A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210824798.6A CN115222923A (zh) 2022-07-13 2022-07-13 在漫游制作应用中切换视点的方法、装置、设备和介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210824798.6A CN115222923A (zh) 2022-07-13 2022-07-13 在漫游制作应用中切换视点的方法、装置、设备和介质

Publications (1)

Publication Number Publication Date
CN115222923A true CN115222923A (zh) 2022-10-21

Family

ID=83611535

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210824798.6A Pending CN115222923A (zh) 2022-07-13 2022-07-13 在漫游制作应用中切换视点的方法、装置、设备和介质

Country Status (1)

Country Link
CN (1) CN115222923A (zh)

Similar Documents

Publication Publication Date Title
US20200388080A1 (en) Displaying content in an augmented reality system
US20180075652A1 (en) Server and method for producing virtual reality image about object
US9224237B2 (en) Simulating three-dimensional views using planes of content
US9437038B1 (en) Simulating three-dimensional views using depth relationships among planes of content
US9639988B2 (en) Information processing apparatus and computer program product for processing a virtual object
US9591295B2 (en) Approaches for simulating three-dimensional views
JP5776201B2 (ja) 情報処理装置、情報共有方法、プログラム及び端末装置
US9268410B2 (en) Image processing device, image processing method, and program
EP2974509B1 (en) Personal information communicator
WO2017147909A1 (zh) 目标设备的控制方法和装置
CN114648615B (zh) 目标对象交互式重现的控制方法、装置、设备及存储介质
JP2016122392A (ja) 情報処理装置、情報処理システム、その制御方法及びプログラム
CN112733641A (zh) 物体尺寸测量方法、装置、设备及存储介质
CN115097975A (zh) 用于控制视角转换的方法、装置、设备和存储介质
CN111179438A (zh) Ar模型动态固定方法、装置、电子设备和存储介质
CN115847384B (zh) 机械臂安全平面信息显示方法及相关产品
CN117078888A (zh) 虚拟角色的服装生成方法、装置、介质及电子设备
CN114089836B (zh) 标注方法、终端、服务器和存储介质
CN115222923A (zh) 在漫游制作应用中切换视点的方法、装置、设备和介质
CN112667137B (zh) 户型图和房屋三维模型的切换显示方法及装置
CN111753565B (zh) 用于呈现与光通信装置有关的信息的方法和电子设备
WO2021121061A1 (zh) 用于设置虚拟对象的空间位置的方法和电子设备
JP2017168132A (ja) 仮想オブジェクトの表示システム、表示システムプログラム及び表示方法
JP6208977B2 (ja) 情報処理装置、通信端末およびデータ取得方法
CN113421343B (zh) 基于增强现实观测设备内部结构的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination