CN114463104A - 用于处理vr场景的方法、装置和计算机程序产品 - Google Patents

用于处理vr场景的方法、装置和计算机程序产品 Download PDF

Info

Publication number
CN114463104A
CN114463104A CN202210376410.0A CN202210376410A CN114463104A CN 114463104 A CN114463104 A CN 114463104A CN 202210376410 A CN202210376410 A CN 202210376410A CN 114463104 A CN114463104 A CN 114463104A
Authority
CN
China
Prior art keywords
panoramic image
scene
target
current
editing instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210376410.0A
Other languages
English (en)
Other versions
CN114463104B (zh
Inventor
杨光
白杰
李成杰
申福龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beike Technology Co Ltd
Original Assignee
Beike Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beike Technology Co Ltd filed Critical Beike Technology Co Ltd
Priority to CN202210376410.0A priority Critical patent/CN114463104B/zh
Publication of CN114463104A publication Critical patent/CN114463104A/zh
Application granted granted Critical
Publication of CN114463104B publication Critical patent/CN114463104B/zh
Priority to PCT/CN2022/140021 priority patent/WO2023197657A1/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0641Shopping interfaces
    • G06Q30/0643Graphical representation of items or shoppers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Architecture (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本公开实施例公开了一种用于处理VR场景的方法、装置和计算机程序产品,其中,方法包括:接收到用户针对当前VR场景的对象编辑指令时,确定编辑指令指向的目标对象和目标属性,目标对象为当前VR场景中包含的对象;获取与对象编辑指令匹配的目标全景图像,目标全景图像中包含的目标对象具有目标属性,且目标对象之外的其他对象在目标全景图像中的属性与其在当前VR场景中的属性一致;将构成当前VR场景的当前全景图像替换为目标全景图像,生成更新后的VR场景;呈现更新后的VR场景。可以更灵活地响应用户需求,使用户可以直观地感受VR场景中对象在不同属性下的呈现效果。

Description

用于处理VR场景的方法、装置和计算机程序产品
技术领域
本公开涉及一种用于处理VR场景的方法、装置和计算机程序产品。
背景技术
VR(VirtualReality,虚拟现实)场景又称为全景场景,是通过计算机图像处理技术,基于全景图像构建的多源信息融合的、交互式的三维场景。可以通过720°的视角更逼真、更全面的呈现立体场景。目前已在各个领域中得到了广泛的应用,例如,家具展示、旅游景点展示、虚拟展厅、数字博物馆等,再例如VR汽车和VR看房。
发明内容
本公开实施例提供一种用于处理VR场景的方法、装置和计算机程序产品。
本公开实施例的一个方面,提供一种用于处理VR场景的方法,包括:响应于接收到用户针对当前VR场景的对象编辑指令,确定对象编辑指令指向的目标对象和目标属性,目标对象为当前VR场景中包含的对象;获取与对象编辑指令匹配的目标全景图像,目标全景图像中包含的目标对象具有目标属性,且目标对象之外的其他对象在目标全景图像中的属性与其在当前VR场景中的属性一致;将构成当前VR场景的当前全景图像替换为目标全景图像,生成更新后的VR场景;呈现更新后的VR场景。
在一些实施例中,获取与对象编辑指令匹配的目标全景图像,包括:从预设的全景图像库中提取与对象编辑指令匹配的目标全景图像;其中,全景图像库中预存有当前VR场景中包含的各对象分别对应的全景图像集;对于任一全景图像集,全景图像集根据该全景图像集对应的对象所具有的不同属性划分为多个全景图像子集,该全景图像集对应的对象在不同的全景图像子集中具有不同的属性,且除该全景图像集对应的对象之外的其他对象在各全景图像子集中的属性均与当前全景图像一致;对于任一全景图像子集,全景图像子集包括该全景图像子集对应的对象在不同的游走点位下经渲染处理得到的全景图像。
在一些实施例中,从预设的全景图像库中提取与对象编辑指令匹配的目标全景图像,包括:基于目标对象,从全景图像库中确定目标全景图像集;基于目标属性,从目标全景图像集中确定出目标全景图像子集;从目标全景图像子集中提取目标全景图像。
在一些实施例中,获取与对象编辑指令匹配的目标全景图像,包括:基于目标对象和目标属性,对当前全景图像进行渲染处理,得到目标全景图像。
在一些实施例中,将构成当前VR场景的当前全景图像替换为目标全景图像,包括:基于当前全景图像的游走点位与目标全景图像的游走点位,确定当前全景图像与目标全景图像的对应关系;基于对应关系,将当前全景图像替换为对应的目标全景图像。
在一些实施例中,接收到用户针对当前VR场景的对象编辑指令之前,方法还包括:呈现当前VR场景;响应于接收到列表呈现指令,在当前VR场景中的预设位置呈现对象编辑指令列表,以使用户在对象编辑指令列表中选取对象编辑指令;以及,接收用户针对对象编辑指令的选取指令。
在一些实施例中,在当前VR场景中的预设位置呈现对象编辑指令列表,包括:基于对象编辑指令列表对应的对象在当前VR场景中的位置,确定预设位置;在预设位置悬浮呈现对象编辑指令列表。
在一些实施例中,方法还包括:响应于接收到场景跳转指令,关闭对象编辑指令列表,并将当前VR场景跳转至场景跳转指令指向的新VR场景;和/或,响应于接收到视角旋转指令,保持对象编辑指令列表的位置不变,并按照视角旋转指令变换当前VR场景的视角。
本公开实施例还提供了一种用于处理VR场景的装置,包括:指令接收单元,被配置成响应于接收到用户针对当前VR场景的对象编辑指令,确定对象编辑指令指向的目标对象和目标属性,目标对象为当前VR场景中包含的对象;图像获取单元,被配置成从预设的全景图像库中获取与对象编辑指令匹配的目标全景图像,目标全景图像中包含的目标对象具有目标属性,且目标对象之外的其他对象在目标全景图像中的属性与其在当前VR场景中的属性一致;场景更新单元,被配置成将构成当前VR场景的当前全景图像替换为目标全景图像,生成更新后的VR场景;场景呈现单元,被配置成呈现更新后的VR场景。
本公开的实施例还提供了一种计算机程序产品,包括计算机程序指令,该计算机程序指令被处理器执行时,实现上述任一实施例中的方法。
本公开的实施例提供的用于处理VR场景的方法,接收到用户针对当前VR场景的对象编辑指令时,确定对象编辑指令指向的目标对象和目标属性,目标对象为当前VR场景中包含的对象;从预设的全景图像库中获取与对象编辑指令匹配的目标全景图像,目标全景图像中包含的目标对象具有目标属性;将构成当前VR场景的当前全景图像替换为目标全景图像,生成更新后的VR场景;呈现更新后的VR场景。由用户选择VR场景中对象的属性,并根据用户选定的属性将构成当前VR场景的当前全景图像替换为对应的目标全景图像,然后通过更新后的VR场景向用户呈现用户选定的属性,使用户可以直观地感受VR场景中对象在不同属性下的呈现效果,可以更灵活地响应用户需求,并拓展例如VR场景对不同属性的呈现能力,有助于提高用户在浏览VR场景时的体验。
下面通过附图和实施例,对本公开的技术方案做进一步的详细描述。
附图说明
构成说明书的一部分的附图描述了本公开的实施例,并且连同描述一起用于解释本公开的原理。
参照附图,根据下面的详细描述,可以更加清楚地理解本公开,其中:
图1为本公开的用于处理VR场景的方法的一个实施例的流程图;
图2为本公开的用于处理VR场景的方法的一个实施例中全景图像库的存储结构示意图;
图3为本公开的用于处理VR场景的方法的又一个实施例的流程图;
图4为本公开的用于处理VR场景的方法的一个应用场景中的对象编辑指令列表的示意图;
图5为本公开用于处理VR场景的装置一个实施例的结构示意图;
图6为本公开电子设备一个应用实施例的结构示意图。
具体实施方式
现在将参照附图来详细描述本公开的各种示例性实施例。应注意到:除非另外具体说明,否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本公开的范围。
本领域技术人员可以理解,本公开实施例中的“第一”、“第二”等术语仅用于区别不同步骤、设备或模块等,既不代表任何特定技术含义,也不表示它们之间的必然逻辑顺序。
还应理解,在本公开实施例中,“多个”可以指两个或两个以上,“至少一个”可以指一个、两个或两个以上。
还应理解,对于本公开实施例中提及的任一部件、数据或结构,在没有明确限定或者在前后文给出相反启示的情况下,一般可以理解为一个或多个。
另外,本公开中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本公开中字符“/”,一般表示前后关联对象是一种“或”的关系。
还应理解,本公开对各个实施例的描述着重强调各个实施例之间的不同之处,其相同或相似之处可以相互参考,为了简洁,不再一一赘述。
同时,应当明白,为了便于描述,附图中所示出的各个部分的尺寸并不是按照实际的比例关系绘制的。
以下对至少一个示例性实施例的描述实际上仅仅是说明性的,决不作为对本公开及其应用或使用的任何限制。
对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论,但在适当情况下,所述技术、方法和设备应当被视为说明书的一部分。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步讨论。
本公开实施例可以应用于终端设备、计算机系统、服务器等电子设备,其可与众多其它通用或专用计算系统环境或配置一起操作。适于与终端设备、计算机系统、服务器等电子设备一起使用的众所周知的终端设备、计算系统、环境和/或配置的例子包括但不限于:个人计算机系统、服务器计算机系统、瘦客户机、厚客户机、手持或膝上设备、基于微处理器的系统、机顶盒、可编程消费电子产品、网络个人电脑、小型计算机系统﹑大型计算机系统和包括上述任何系统的分布式云计算技术环境,等等。
终端设备、计算机系统、服务器等电子设备可以在由计算机系统执行的计算机系统可执行指令(诸如程序模块)的一般语境下描述。通常,程序模块可以包括例程、程序、目标程序、组件、逻辑、数据结构等等,它们执行特定的任务或者实现特定的抽象数据类型。计算机系统/服务器可以在分布式云计算环境中实施,分布式云计算环境中,任务是由通过通信网络链接的远程处理设备执行的。在分布式云计算环境中,程序模块可以位于包括存储设备的本地或远程计算系统存储介质上。
目前,VR场景通常是基于一组预先拍摄或渲染好的全景图像搭建的,由于一组全景图像仅能表征图像中包含的对象的一种属性,这就导致搭建好的VR场景也只能固定呈现对象的一种属性。以VR看房为例,VR看房场景中的墙体通常只能呈现一种颜色的墙漆。
在实施本公开的过程中,发明人发现,只能固定呈现一种属性的VR场景不能充分反应对象的不同属性,导致用户只能从VR场景中浏览对象的固定属性,无法从VR场景中感受对象在不同属性下的呈现效果。而不同用户的喜好通常也会存在差异,因此这种单一的呈现方式也就不能灵活地应对用户的不同喜好。
下面结合图1对本公开的用于处理VR场景的方法进行示例性说明。图1示出了本公开的用于处理VR场景的方法的一个实施例的流程图,如图1所示,该流程包括步骤110至步骤140,下面分别对各个步骤进行举例说明。
步骤110、响应于接收到用户针对当前VR场景的对象编辑指令,确定对象编辑指令指向的目标对象和目标属性。
其中,目标对象为当前VR场景中包含的对象。
在本实施例中,当前VR场景为执行主体(例如可以是智能手机等终端设备)在当前时刻向用户呈现的VR场景。对象表示当前VR场景包含的物体。属性可以表征对象的特征,例如可以通过外观属性表则对象的外观特征,通过材料属性表征对象的材料特征等。
用户可以通过对象编辑指令在当前VR场景中选取目标对象,并根据需求确定目标对象的目标属性。
作为示例,用户可以通过智能手机浏览VR场景,假设当前VR场景为家具展示,用户可以通过对象编辑指令更换目标家具的材质。当智能手机接收到用户下达的对象编辑指令时,可以根据对象编辑指令确定目标对象为用户期望更换材质的家具,目标属性则是用户期望的材质。
在本实施例的一些可选的实现方式中,当目标对象为墙体时,目标属性为墙体颜色或墙面材质。
在本实施方式中,当前VR场景可以用于房屋展示,当前VR场景中的墙体可以作为目标对象,如此一来,用户可以通过对象编辑指令编辑墙体的颜色或墙面材质。作为示例,墙面材质可以包括墙面漆、瓷砖、壁纸等不同类型。
进一步的,不同位置的墙体可以作为不同的对象,如此,可以提高用户对VR场景的自定义粒度。
步骤120、获取与对象编辑指令匹配的目标全景图像。
其中,目标全景图像中包含的目标对象具有目标属性,且目标对象之外的其他对象在目标全景图像中的属性与当前VR场景中的属性一致。
在一个具体的示例中,目标全景图像可以是预先生成的,并存储在全景图像库中。全景图像库用于存储当前VR场景对应的全景图像,即全景图像库中的全景图像与当前VR场景表征同一个真实场景。全景图像库中不仅包括构成当前VR场景的当前全景图像,还包括未用于当前VR场景的备用全景图像。备用全景图像的图像参数(例如游走点位、图像尺寸)均与当前全景图像一致,并且任意两个全景图像中各对象的属性均存在差异。
通常,一个VR场景中包括多个游走点位,每个游走点位可以对应多个全景图像。基于全景图像库中的全景图像,采用不同的全景图像的组合方式,可以构建多个VR场景,这些VR场景与当前VR场景均对应同一个真实场景,不同的VR场景可以呈现同一个真实物体的不同属性。
本实施例中的目标全景图像包括当前VR场景中各游走点位分别对应的多个全景图像。作为示例,当前VR场景包括3个游走点位,每个游走点位对应2个当前全景图像,目标对象为墙体,目标属性为黄色,则目标全景图像的数量为6个,分别对应3个游走点位,每个游走点位对应2个目标全景图像。并且,在这6个全景图像中,墙体均为黄色,除墙体之外的其他对象的属性则与当前VR场景中的属性一致。
在本实施例的一些可选的实施方式中,还可以采用如下方式生成目标全景图像:基于目标对象和目标属性,对当前全景图像进行渲染处理,得到目标全景图像。
在本实施方式中,执行主体可以根据对象编辑指令对当前全景图像中的目标对象进行渲染处理,使其呈现出目标属性,通过实时生成目标全景图像,可以更灵活地响应用户的需求。
步骤130、将构成当前VR场景的当前全景图像替换为目标全景图像,生成更新后的VR场景。
在本实施例中,更新后的VR场景可以呈现具有目标属性的目标对象。
作为示例,执行主体(例如可以是呈现当前VR场景的智能手机)中可以预先装载有VR场景生成工具,例如可以是OpenGL ES、GoogleCardboard。执行主体可以将步骤120中提取的目标全景图像输入VR场景生成工具,经过对准、拼接等处理后,得到更新后的VR场景。
在本实施例的一些可选的实现方式中,可以通过如下步骤生成更新后的VR场景:基于当前全景图像的游走点位与目标全景图像的游走点位,确定当前全景图像与目标全景图像的对应关系;基于对应关系,将当前全景图像替换为对应的目标全景图像。
通常,VR场景中的浏览点位与全景图像的游走点位是对应的,同一个游走点位得到的全景图像在构建VR场景时,图像对准和拼接等环节所需要的计算量较小,因为构建VR场景的效率也较高。
本实施方式中,根据游走点位确定当前全景图像与目标全景图像的对应关系,以此完成全景图像的替换,可以降低运算量,提高更新后的VR场景的生成效率。
步骤140、呈现更新后的VR场景。
在一个具体的示例中,用户通过智能手机进行VR看房时,当前VR场景中的墙体颜色为白色,用户可以通过点击手机屏幕的方式将墙体选中为目标对象,并选中黄色为目标属性,以生成对象编辑指令并发送至智能手机。智能手机根据对象编辑指令从全景图像库提取墙体颜色为黄色的目标全景图像,然后将当前VR场景中的当前全景图像替换为目标全景图像,得到更新后的VR场景,并通过手机屏幕呈现给用户。此时,用户浏览的VR场景中墙体的颜色为黄色。
可以理解的是,更新后的VR场景被呈现时,即成为新的当前VR场景,相应地,上述步骤110至步骤140同样适用于新的当前VR场景。
本公开实施例提供的用于处理VR场景的方法,接收到用户针对当前VR场景的对象编辑指令时,确定对象编辑指令指向的目标对象和目标属性,目标对象为当前VR场景中包含的对象;从预设的全景图像库中获取与对象编辑指令匹配的目标全景图像,目标全景图像中包含的目标对象具有目标属性;将构成当前VR场景的当前全景图像替换为目标全景图像,生成更新后的VR场景;呈现更新后的VR场景。由用户选择VR场景中对象的属性,并根据用户选定的属性将构成当前VR场景的当前全景图像替换为对应的目标全景图像,然后通过更新后的VR场景向用户呈现用户选定的属性,可以更灵活地响应用户需求,从而提高用户在浏览VR场景时的体验。
在本实施例的一些可选的实现方式中,获取与对象编辑指令匹配的目标全景图像,包括:从预设的全景图像库中提取与对象编辑指令匹配的目标全景图像;其中,全景图像库中预存有当前VR场景中包含的各对象分别对应的全景图像集;对于任一全景图像集,全景图像集根据该全景图像集对应的对象所具有的不同属性划分为多个全景图像子集,该全景图像集对应的对象在不同的全景图像子集中具有不同的属性,且除该全景图像集对应的对象之外的其他对象在各全景图像子集中的属性均与当前全景图像一致;对于任一全景图像子集,全景图像子集包括该全景图像子集对应的对象在不同游走点位下经过渲染处理得到的全景图像。
在本实施方式中,对于任一个全景图像子集,利用VR场景搭建工具将其中的全景图像进行对准、拼接等处理,可以生成一个VR场景。对于任一个全景图像集,该全景图像集对应的对象在不同全景图像子集对应的VR场景中,具有不同的属性,且该对象之外的其他对象的属性与当前VR场景中的属性一致。
技术人员可以利用图像处理软件对原始全景图像进行渲染处理,根据对象的属性,将原始全景图像中的对象渲染成对应的视觉效果,如此一来,可以通过不同的全景图像呈现不同的属性。
进一步结合图2对本实施方式中的全景图像库进行说明,图2示出了本公开的用于处理VR场景的一个实施例中全景图像库的存储结构示意图,如图2所示,全景图像库200中存储有两个全景图像集,其中,全景图像集210对应的对象为墙体,全景图像集220对应的对象为家具。全景图像集210根据墙体的颜色划分为全景图像子集211、全景图像子集212和全景图像子集213,其中,每个全景图像子集可以包括六个全景图像,每个游走点位对应两个全景图像;在全景图像子集211中,墙体的颜色均为黄色;在全景图像子集212中,墙体的颜色均为白色;在全景图像子集213中,墙体的颜色均为绿色;并且,在以上三个全景图像子集中,家具的材质均与当前VR场景中的材质一致,例如可以是木材。
全景图像集220根据家具的材质划分为全景图像子集221和全景图像子集222,每个全景图像子集可以包括六个全景图像,每个游走点位对应两个全景图像;在全景图像子集221中,家具的材质均为木材;在全景图像子集222中,家具的材质均为金属;并且,在以上两个全景图像子集中,墙体的颜色均与当前VR场景中的材质一致,例如可以是白色。
在本实施方式中,可以根据对象的属性将预先生成的全景图像存储在全景图像库中,以便于从中提取目标全景图像,一方面可以提高获取目标全景图像的效率,进而提高VR场景的更新效率;另一方面,与实时渲染相比,可以降低对图像处理设备的性能需求,有助于降低开发成本。
进一步的,上述步骤120可以进一步包括以下步骤:基于目标对象,从全景图像库中确定目标全景图像集;基于目标属性,从目标全景图像集中确定出目标全景图像子集;从目标全景图像子集中提取目标全景图像。
需要说明的是,全景图像库可以存储在执行主体的本地存储空间,也可以设置在云端服务器,本公开对此不做限定。
继续结合图2进行说明,假设步骤110中确定的目标对象为墙体,目标属性为黄色,则执行主体(例如可以是呈现VR场景的智能手机)可以直接从全景图像库200中检索出墙体对应的全景图像集210;然后基于“黄色”,从全景图像集210中检索出全景图像子集211,从全景图像子集211的全景图像即为目标全景图像。
再例如,当全景图像库200设置在云端服务器时,执行主体(例如可以是呈现VR场景的智能手机)可以基于“墙体”和“黄色”生成检索条件,并发送至服务器。由服务器根据检索条件从全景图像库200中确定出全景图像子集211,然后生成全景图像子集211的链接,并发送至执行主体。执行主体可以根据链接从全景图像子集211中提取目标全景图像。
在本实施方式中,可以根据目标对象和目标属性逐级检索全景图像库,以确定目标全景图像,可以进一步提高获取目标全景图像的效率。
接着参考图3,图3示出了本公开的用于处理VR场景的又一个实施例的流程图,如图3所示,该流程包括步骤310至步骤370,下面分别对各个步骤进行举例说明。
步骤310、呈现当前VR场景。
步骤320、响应于接收到列表呈现指令,在当前VR场景中的预设位置呈现对象编辑指令列表,以使用户在对象编辑指令列表中选取对象编辑指令。
作为示例,用户在使用智能手机浏览当前VR场景时,当用户单击手机屏幕时,智能手机接可以当前VR场景中的预设位置呈现对象编辑指令列表。若当前VR场景中包括多个对象,可以将多个对象的编辑指令集成在一个对象编辑指令列表,也可以每个对象对应一个对象编辑指令列表。
在本实施例的一个可选的示例中,列表呈现指令还可以触发类的指令,例如,当视线与对象的夹角达到预设角度时,可以在预设位置呈现对象编辑指令列表。
进一步参考图4,图4示出了本公开的用于处理VR场景的方法一个应用场景中对象编辑指令列表的示意图。在图4所示的VR看房场景中,目标对象可以为墙体,对象编辑指令列表400可以采用图形的形式呈现在墙体周围,并以图标颜色表征墙体的颜色属性。
在本实施例的一些可选实现方式中,在当前VR场景中的预设位置呈现对象编辑指令列表,包括:基于对象编辑指令列表对应的对象在当前VR场景中的位置,确定预设位置;在预设位置悬浮呈现对象编辑指令列表。
作为示例,可以将预设位置设置在靠近目标的三维空间中。
在本实施方式中,可以根据对象所在的位置确定对象编辑指令列表的呈现位置,然后将对象编辑指令列表悬浮呈现在对象周围的三维空间中,以此表征对象编辑指令列表与对象的对应关系,可以提高操作的便利性。
步骤330、接收用户针对对象编辑指令的选取指令。
继续参考图4,用户可以在编辑指令列表中点击图标,以选取对应的对象编辑指令。
步骤340、响应于接收到用户针对当前VR场景的对象编辑指令,确定编辑指令指向的目标对象和目标属性。
步骤350、从预设的全景图像库中获取与对象编辑指令匹配的目标全景图像。
步骤360、将构成当前VR场景的当前全景图像替换为目标全景图像,生成更新后的VR场景。
步骤370、呈现更新后的VR场景。
需要说明的是,步骤340至步骤370与前述步骤110至步骤140相对应,此处不再赘述。
从图3可以看出,图3所示的实施例体现了:接收到用户的列表呈现指令时,在当前VR场景的预设位置呈现对象编辑指令列表的步骤,可以根据不同用户的喜好,采用不同的呈现策略,从而进一步提高用户体验。
在上述实施例的一些可选实现方式中,该方法还可以进一步包括:响应于接收到场景跳转指令,关闭对象编辑指令列表,并将当前VR场景跳转至场景跳转指令指向的新VR场景;和/或,响应于接收到视角旋转指令,保持对象编辑指令列表的位置不变,并按照视角旋转指令变换当前VR场景的视角。
在本实现方式中,新VR场景与当前VR场景分别表示不同的真实场景,两个VR场景中的对象存在差异,因此,在场景跳转的过程中,关闭对象编辑指令列表,可以避免对象编辑指令列表与新VR场景的冲突。
可以理解的是,新VR场景被呈现时,即成为新的当前VR场景,则上述实施例仍然适用。
在本实现方式中,用户在浏览当前VR场景时,可以通过旋转视角来浏览当前VR场景中的不同区域,在此过程中,保持对象编辑指令列表的位置不变,以免对用户的浏览过程造成干扰。
下面结合图5对本公开的用于处理VR场景的装置进行示例性说明,如图5所示,该装置包括:指令接收单元510,被配置成响应于接收到用户针对当前VR场景的对象编辑指令,确定编辑指令指向的目标对象和目标属性,目标对象为当前VR场景中包含的对象;图像获取单元520,被配置成获取与对象编辑指令匹配的目标全景图像,目标全景图像中包含的目标对象具有目标属性,且目标对象之外的其他对象在目标全景图像中的属性与其在当前VR场景中的属性一致;场景更新单元530,被配置成将构成当前VR场景的当前全景图像替换为目标全景图像,生成更新后的VR场景;场景呈现单元540,被配置成呈现更新后的VR场景。
在其中一个实施例中,图像获取单元520被进一步配置成:从预设的全景图像库中提取与对象编辑指令匹配的目标全景图像;其中,全景图像库中预存有当前VR场景中包含的各对象分别对应的全景图像集;对于任一全景图像集,全景图像集根据该全景图像集对应的对象所具有的不同属性划分为多个全景图像子集,该全景图像集对应的对象在不同的全景图像子集中具有不同的属性,且除该全景图像集对应的对象之外的其他对象在各全景图像子集中的属性均与当前全景图像一致;对于任一全景图像子集,全景图像子集包括该全景图像子集对应的对象在不同游走点位下经过渲染处理得到的全景图像。
在其中一个实施例中,图像获取单元520进一步包括:第一索引模块,被配置成基于目标对象,从全景图像库中确定目标全景图像集;第二索引模块,被配置成基于目标属性,从目标全景图像集中确定出目标全景图像子集;图像提取模块,被配置成从目标全景图像子集中提取目标全景图像。
在其中一个实施例中,图像获取单元520被配置成:基于目标对象和目标属性,对当前全景图像进行渲染处理,得到目标全景图像。
在其中一个实施例中,场景更新单元530进一步包括:匹配模块,被配置成基于当前全景图像的游走点位与目标全景图像的游走点位,确定当前全景图像与目标全景图像的对应关系;替换模块,被配置成将当前全景图像替换为对应的目标全景图像。
在其中一个实施例中,该装置还包括:当前呈现单元,被配置成呈现当前VR场景;列表呈现单元,被配置成响应于接收到列表呈现指令,在当前VR场景中的预设位置呈现对象编辑指令列表,以使用户在对象编辑指令列表中选取对象编辑指令;以及,指令确定单元,被配置成接收用户针对对象编辑指令的选取指令。
在其中一个实施例中,列表呈现单元包括:位置确定模块,被配置成基于对象编辑指令列表对应的对象在当前VR场景中的位置,确定预设位置;列表呈现模块,被配置成在预设位置悬浮呈现对象编辑指令列表。
在其中一个实施例中,该装置还包括:场景跳转单元,被配置成响应于接收到场景跳转指令,关闭对象编辑指令列表,并将当前VR场景跳转至场景跳转指令指向的新VR场景;和/或,视角变换单元,被配置成响应于接收到视角旋转指令,保持对象编辑指令列表的位置不变,并按照视角旋转指令变换当前VR场景的视角。
在其中一个实施例中,当目标对象为墙体时,目标属性为墙体颜色。
下面,参考图6来描述根据本公开实施例的电子设备。该电子设备可以是第一设备和第二设备中的任一个或两者、或与它们独立的单机设备,该单机设备可以与第一设备和第二设备进行通信,以从它们接收所采集到的输入信号。
图6图示了根据本公开实施例的电子设备的框图。
如图6所示,电子设备包括一个或多个处理器和存储器。
处理器可以是中央处理单元(CPU)或者具有数据处理能力和/或指令执行能力的其他形式的处理单元,并且可以控制电子设备中的其他组件以执行期望的功能。
存储器可以存储一个或多个计算机程序产品,所述存储器可以包括各种形式的计算机可读存储介质,例如易失性存储器和/或非易失性存储器。所述易失性存储器例如可以包括随机存取存储器(RAM)和/或高速缓冲存储器(cache)等。所述非易失性存储器例如可以包括只读存储器(ROM)、硬盘、闪存等。在所述计算机可读存储介质上可以存储一个或多个计算机程序产品,处理器可以运行所述计算机程序产品,以实现上文所述的本公开的各个实施例的用于处理VR场景的方法以及/或者其他期望的功能。
在一个示例中,电子装置还可以包括:输入装置和输出装置,这些组件通过总线系统和/或其他形式的连接机构(未示出)互连。
此外,该输入装置还可以包括例如键盘、鼠标等等。
该输出装置可以向外部输出各种信息,包括确定出的距离信息、方向信息等。该输出装置可以包括例如显示器、扬声器、打印机、以及通信网络及其所连接的远程输出装置等等。
当然,为了简化,图6中仅示出了该电子设备中与本公开有关的组件中的一些,省略了诸如总线、输入/输出接口等等的组件。除此之外,根据具体应用情况,电子设备还可以包括任何其他适当的组件。
除了上述方法和设备以外,本公开的实施例还可以是计算机程序产品,其包括计算机程序指令,所述计算机程序指令在被处理器运行时使得所述处理器执行本说明书上述部分中描述的根据本公开各种实施例的用于处理VR场景的方法中的步骤。
所述计算机程序产品可以以一种或多种程序设计语言的任意组合来编写用于执行本公开实施例操作的程序代码,所述程序设计语言包括面向对象的程序设计语言,诸如Java、C++等,还包括常规的过程式程序设计语言,诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。
此外,本公开的实施例还可以是计算机可读存储介质,其上存储有计算机程序指令,所述计算机程序指令在被处理器运行时使得所述处理器执行本说明书上述部分中描述的根据本公开各种实施例的用于处理VR场景的方法中的步骤。
所述计算机可读存储介质可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以包括但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
以上结合具体实施例描述了本公开的基本原理,但是,需要指出的是,在本公开中提及的优点、优势、效果等仅是示例而非限制,不能认为这些优点、优势、效果等是本公开的各个实施例必须具备的。另外,上述公开的具体细节仅是为了示例的作用和便于理解的作用,而非限制,上述细节并不限制本公开为必须采用上述具体的细节来实现。
本说明书中各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其它实施例的不同之处,各个实施例之间相同或相似的部分相互参见即可。对于系统实施例而言,由于其与方法实施例基本对应,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本公开中涉及的器件、装置、设备、系统的方框图仅作为例示性的例子并且不意图要求或暗示必须按照方框图示出的方式进行连接、布置、配置。如本领域技术人员将认识到的,可以按任意方式连接、布置、配置这些器件、装置、设备、系统。诸如“包括”、“包含”、“具有”等等的词语是开放性词汇,指“包括但不限于”,且可与其互换使用。这里所使用的词汇“或”和“和”指词汇“和/或”,且可与其互换使用,除非上下文明确指示不是如此。这里所使用的词汇“诸如”指词组“诸如但不限于”,且可与其互换使用。
可能以许多方式来实现本公开的方法和装置。例如,可通过软件、硬件、固件或者软件、硬件、固件的任何组合来实现本公开的方法和装置。用于所述方法的步骤的上述顺序仅是为了进行说明,本公开的方法的步骤不限于以上具体描述的顺序,除非以其它方式特别说明。此外,在一些实施例中,还可将本公开实施为记录在记录介质中的程序,这些程序包括用于实现根据本公开的方法的机器可读指令。因而,本公开还覆盖存储用于执行根据本公开的方法的程序的记录介质。
还需要指出的是,在本公开的装置、设备和方法中,各部件或各步骤是可以分解和/或重新组合的。这些分解和/或重新组合应视为本公开的等效方案。
提供所公开的方面的以上描述以使本领域的任何技术人员能够做出或者使用本公开。对这些方面的各种修改对于本领域技术人员而言是非常显而易见的,并且在此定义的一般原理可以应用于其他方面而不脱离本公开的范围。因此,本公开不意图被限制到在此示出的方面,而是按照与在此公开的原理和新颖的特征一致的最宽范围。
为了例示和描述的目的已经给出了以上描述。此外,此描述不意图将本公开的实施例限制到在此公开的形式。尽管以上已经讨论了多个示例方面和实施例,但是本领域技术人员将认识到其某些变型、修改、改变、添加和子组合。

Claims (10)

1.一种用于处理VR场景的方法,其特征在于,包括:
响应于接收到用户针对当前VR场景的对象编辑指令,确定所述对象编辑指令指向的目标对象和目标属性,所述目标对象为所述当前VR场景中包含的对象;
获取与所述对象编辑指令匹配的目标全景图像,所述目标全景图像中包含的目标对象具有所述目标属性,且所述目标对象之外的其他对象在所述目标全景图像中的属性与其在所述当前VR场景中的属性一致;
将构成所述当前VR场景的当前全景图像替换为所述目标全景图像,生成更新后的VR场景;
呈现所述更新后的VR场景。
2.根据权利要求1所述的方法,其特征在于,获取与所述对象编辑指令匹配的目标全景图像,包括:从预设的全景图像库中提取与所述对象编辑指令匹配的目标全景图像,其中,所述全景图像库中预存有所述当前VR场景中包含的各对象分别对应的全景图像集;
对于任一所述全景图像集,所述全景图像集根据该全景图像集对应的对象所具有的不同属性划分为多个全景图像子集,该全景图像集对应的对象在不同的全景图像子集中具有不同的属性,且除该全景图像集对应的对象之外的其他对象在各全景图像子集中的属性均与所述当前全景图像一致;
对于任一所述全景图像子集,所述全景图像子集包括该全景图像子集对应的对象在不同的游走点位下经渲染处理得到的全景图像。
3.根据权利要求2所述的方法,其特征在于,从预设的全景图像库中提取与所述对象编辑指令匹配的目标全景图像,包括:
基于所述目标对象,从所述全景图像库中确定目标全景图像集;
基于所述目标属性,从所述目标全景图像集中确定出目标全景图像子集;
从所述目标全景图像子集中提取所述目标全景图像。
4.根据权利要求1所述的方法,其特征在于,获取与所述对象编辑指令匹配的目标全景图像,包括:
基于所述目标对象和所述目标属性,对所述当前全景图像进行渲染处理,得到所述目标全景图像。
5.根据权利要求1所述的方法,其特征在于,将构成所述当前VR场景的当前全景图像替换为所述目标全景图像,包括:
基于所述当前全景图像的游走点位与所述目标全景图像的游走点位,确定所述当前全景图像与所述目标全景图像的对应关系;
基于所述对应关系,将所述当前全景图像替换为对应的目标全景图像。
6.根据权利要求1所述的方法,其特征在于,接收到用户针对当前VR场景的对象编辑指令之前,所述方法还包括:
呈现所述当前VR场景;
响应于接收到列表呈现指令,在所述当前VR场景中的预设位置呈现对象编辑指令列表,以使所述用户在所述对象编辑指令列表中选取对象编辑指令;以及,
接收所述用户针对对象编辑指令的选取指令。
7.根据权利要求6所述的方法,其特征在于,在所述当前VR场景中的预设位置呈现对象编辑指令列表,包括:
基于所述对象编辑指令列表对应的对象在所述当前VR场景中的位置,确定所述预设位置;
在所述预设位置悬浮呈现所述对象编辑指令列表。
8.根据权利要求1至7之一所述的方法,其特征在于,所述方法还包括:
响应于接收到场景跳转指令,关闭所述对象编辑指令列表,并将所述当前VR场景跳转至所述场景跳转指令指向的新VR场景;和/或
响应于接收到视角旋转指令,保持所述对象编辑指令列表的位置不变,并按照所述视角旋转指令变换所述当前VR场景的视角。
9.一种用于处理VR场景的装置,其特征在于,包括:
指令接收单元,被配置成响应于接收到用户针对当前VR场景的对象编辑指令,确定所述对象编辑指令指向的目标对象和目标属性,所述目标对象为所述当前VR场景中包含的对象;
图像获取单元,被配置成获取与所述对象编辑指令匹配的目标全景图像,所述目标全景图像中包含的目标对象具有所述目标属性,且所述目标对象之外的其他对象在所述目标全景图像中的属性与其在所述当前VR场景中的属性一致;
场景更新单元,被配置成将构成所述当前VR场景的当前全景图像替换为所述目标全景图像,生成更新后的VR场景;
场景呈现单元,被配置成呈现所述更新后的VR场景。
10.一种计算机程序产品,包括计算机程序指令,其特征在于,该计算机程序指令被处理器执行时,实现上述权利要求1-8之一所述的用于处理VR场景的方法。
CN202210376410.0A 2022-04-12 2022-04-12 用于处理vr场景的方法、装置和计算机可读存储介质 Active CN114463104B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202210376410.0A CN114463104B (zh) 2022-04-12 2022-04-12 用于处理vr场景的方法、装置和计算机可读存储介质
PCT/CN2022/140021 WO2023197657A1 (zh) 2022-04-12 2022-12-19 用于处理vr场景的方法、装置和计算机程序产品

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210376410.0A CN114463104B (zh) 2022-04-12 2022-04-12 用于处理vr场景的方法、装置和计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN114463104A true CN114463104A (zh) 2022-05-10
CN114463104B CN114463104B (zh) 2022-07-26

Family

ID=81417047

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210376410.0A Active CN114463104B (zh) 2022-04-12 2022-04-12 用于处理vr场景的方法、装置和计算机可读存储介质

Country Status (2)

Country Link
CN (1) CN114463104B (zh)
WO (1) WO2023197657A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023197657A1 (zh) * 2022-04-12 2023-10-19 如你所视(北京)科技有限公司 用于处理vr场景的方法、装置和计算机程序产品

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104077025A (zh) * 2013-03-28 2014-10-01 三星电子株式会社 根据滚动速度不同地显示对象的显示方法和设备
CN106652047A (zh) * 2016-12-29 2017-05-10 四川跳爪信息技术有限公司 一种可自由编辑的虚拟场景全景体验系统
CN106780421A (zh) * 2016-12-15 2017-05-31 苏州酷外文化传媒有限公司 基于全景平台的装修效果展示方法
CN106980728A (zh) * 2017-03-30 2017-07-25 理光图像技术(上海)有限公司 房屋装潢设计体验装置及系统
CN107169247A (zh) * 2017-06-30 2017-09-15 重庆八戒工程网络有限公司 基于3d云设计的家居行业服务平台
US20190215504A1 (en) * 2018-01-05 2019-07-11 Sony Interactive Entertainment Inc. Image generating device and method of generating an image
CN111951374A (zh) * 2020-07-10 2020-11-17 北京城市网邻信息技术有限公司 房屋装修数据的处理方法、装置、电子设备及存储介质
CN111985022A (zh) * 2020-06-23 2020-11-24 北京城市网邻信息技术有限公司 一种线上装修的处理方法、装置、电子设备及存储介质
CN112051956A (zh) * 2020-09-09 2020-12-08 北京五八信息技术有限公司 一种房源的交互方法和装置
CN113554738A (zh) * 2021-07-27 2021-10-26 广东三维家信息科技有限公司 全景图像展示方法、装置、电子设备及存储介质

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180342043A1 (en) * 2017-05-23 2018-11-29 Nokia Technologies Oy Auto Scene Adjustments For Multi Camera Virtual Reality Streaming
CN111399655B (zh) * 2020-03-27 2024-04-26 吴京 一种基于vr同步的图像处理方法及装置
CN114299261A (zh) * 2021-12-28 2022-04-08 江苏华泽微福科技发展有限公司 一种基于虚拟现实技术的客户看房系统
CN114463104B (zh) * 2022-04-12 2022-07-26 贝壳技术有限公司 用于处理vr场景的方法、装置和计算机可读存储介质

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104077025A (zh) * 2013-03-28 2014-10-01 三星电子株式会社 根据滚动速度不同地显示对象的显示方法和设备
CN106780421A (zh) * 2016-12-15 2017-05-31 苏州酷外文化传媒有限公司 基于全景平台的装修效果展示方法
CN106652047A (zh) * 2016-12-29 2017-05-10 四川跳爪信息技术有限公司 一种可自由编辑的虚拟场景全景体验系统
CN106980728A (zh) * 2017-03-30 2017-07-25 理光图像技术(上海)有限公司 房屋装潢设计体验装置及系统
CN107169247A (zh) * 2017-06-30 2017-09-15 重庆八戒工程网络有限公司 基于3d云设计的家居行业服务平台
US20190215504A1 (en) * 2018-01-05 2019-07-11 Sony Interactive Entertainment Inc. Image generating device and method of generating an image
CN111985022A (zh) * 2020-06-23 2020-11-24 北京城市网邻信息技术有限公司 一种线上装修的处理方法、装置、电子设备及存储介质
CN111951374A (zh) * 2020-07-10 2020-11-17 北京城市网邻信息技术有限公司 房屋装修数据的处理方法、装置、电子设备及存储介质
CN112051956A (zh) * 2020-09-09 2020-12-08 北京五八信息技术有限公司 一种房源的交互方法和装置
CN113554738A (zh) * 2021-07-27 2021-10-26 广东三维家信息科技有限公司 全景图像展示方法、装置、电子设备及存储介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023197657A1 (zh) * 2022-04-12 2023-10-19 如你所视(北京)科技有限公司 用于处理vr场景的方法、装置和计算机程序产品

Also Published As

Publication number Publication date
CN114463104B (zh) 2022-07-26
WO2023197657A1 (zh) 2023-10-19

Similar Documents

Publication Publication Date Title
CN109743584B (zh) 全景视频合成方法、服务器、终端设备及存储介质
CN110597773B (zh) 在计算机设备和虚拟现实设备之间共享文件的方法和装置
US20190005032A1 (en) Filtering document search results using contextual metadata
US20210225056A1 (en) Systems and Methods for Creating and Delivering Augmented Reality Content
US10957108B2 (en) Augmented reality image retrieval systems and methods
JP6351219B2 (ja) 画像検索装置、画像検索方法及びプログラム
WO2014152313A2 (en) Method and system for recording information about rendered assets
WO2023202349A1 (zh) 三维标签的交互呈现方法、装置、设备、介质和程序产品
CN114463104B (zh) 用于处理vr场景的方法、装置和计算机可读存储介质
EP4318272A1 (en) Systems and methods for product visualization using a single-page application
CN106875464B (zh) 三维模型文件处理方法、上传方法及客户端
US11003467B2 (en) Visual history for content state changes
CN115423920B (zh) Vr场景的处理方法、装置和存储介质
US20160179821A1 (en) Searching Inside Items
US10732794B2 (en) Methods and systems for managing images
CN116107563A (zh) 低代码应用程序的获取方法及相关装置
CN112988810B (zh) 信息查找方法、装置及设备
CN115687704A (zh) 信息显示方法、装置、电子设备及计算机可读存储介质
CN114117161A (zh) 展示方法及装置
CN112789830A (zh) 用于信道响应的多模式信道不可知渲染的机器人平台
EP3454207B1 (en) Dynamic preview generation in a product lifecycle management environment
CN115454255B (zh) 物品展示的切换方法和装置、电子设备、存储介质
CN113112613B (zh) 模型显示方法、装置、电子设备和存储介质
CN108920598A (zh) 全景图浏览方法、装置、终端设备、服务器及存储介质
US11069091B2 (en) Systems and methods for presentation of and interaction with immersive content

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant