CN111739169A - 基于增强现实的产品展示方法、系统、介质及电子设备 - Google Patents
基于增强现实的产品展示方法、系统、介质及电子设备 Download PDFInfo
- Publication number
- CN111739169A CN111739169A CN201911053209.3A CN201911053209A CN111739169A CN 111739169 A CN111739169 A CN 111739169A CN 201911053209 A CN201911053209 A CN 201911053209A CN 111739169 A CN111739169 A CN 111739169A
- Authority
- CN
- China
- Prior art keywords
- space
- user
- virtual
- product
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 43
- 238000000034 method Methods 0.000 title claims abstract description 39
- 230000000007 visual effect Effects 0.000 claims description 20
- 230000004927 fusion Effects 0.000 claims description 12
- 230000003993 interaction Effects 0.000 claims description 12
- 238000004590 computer program Methods 0.000 claims description 10
- 230000003068 static effect Effects 0.000 claims description 9
- 238000009877 rendering Methods 0.000 claims description 7
- 238000004364 calculation method Methods 0.000 claims description 6
- 230000002452 interceptive effect Effects 0.000 claims description 6
- 238000010276 construction Methods 0.000 claims description 3
- 238000007654 immersion Methods 0.000 abstract description 10
- 239000011159 matrix material Substances 0.000 description 14
- 230000009466 transformation Effects 0.000 description 12
- 230000008569 process Effects 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 7
- 230000000694 effects Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000005094 computer simulation Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
Landscapes
- Engineering & Computer Science (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明公开了一种基于增强现实的产品展示方法、系统、介质及电子设备，所述产品展示方法包括如下步骤：获取目标空间内的视频数据，所述目标空间为用户当前所处的环境空间；利用所述视频数据构建虚拟空间；获取所述用户选定的目标产品，并调取所述目标产品对应的虚拟模型；将所述虚拟模型添加入所述虚拟空间，以构成目标展示空间；获取所述用户的位置信息；根据所述位置信息是否满足预设条件来确定对用户展示目标展示空间或者预设展示空间。本发明技术方案可以给用户带来强烈新鲜感和沉浸感，提高了用户体验，进而提高了用户下单量。
Description
技术领域
本发明涉及增强现实技术领域，具体涉及一种基于增强现实的产品展示方法、系统、介质及电子设备。
背景技术
AR(增强现实)技术是一种将真实世界信息和虚拟世界信息“无缝”集成的新技术。AR技术利用计算机仿真，可以将三维模型渲染在摄像头图像之上，达到虚拟物品与现实场景的叠加效果，从而将虚拟的信息应用到真实世界，被人类感官所感知，达到超越现实的感官体验。
随着移动端AR技术的快速发展与普及，用户数量越来越多，利用AR技术对用户进行产品展示可以给予用户在购物过程中更多的新鲜感和沉浸感，提高用户购物的兴趣。现有技术中，通常只能为用户构建一个虚拟空间中的产品展示场景，然后在该场景中添加虚拟的产品模型与用户进行交互，用户并不能体验到在不同的空间中浏览产品的过程，而且在一个虚拟空间中展示的产品数量有限，并不能给用户带来源源不断的新鲜感，影响了用户体验。
发明内容
本发明实施例要解决的技术问题是为了克服现有技术中无法为用户切换不同的产品展示场景，影响用户体验的缺陷，提供一种基于增强现实的产品展示方法、系统、介质及电子设备。
本发明实施例是通过下述技术方案来解决上述技术问题：
一种基于增强现实的产品展示方法，所述产品展示方法包括：
获取目标空间内的视频数据，所述目标空间为用户当前所处的环境空间；
利用所述视频数据构建虚拟空间；
获取所述用户选定的目标产品，并调取所述目标产品对应的虚拟模型；
将所述虚拟模型添加入所述虚拟空间，以构成目标展示空间；
获取所述用户的位置信息；
判断所述位置信息是否满足预设条件；
若否，则将所述目标展示空间展示给所述用户；
若是，则隐藏所述目标展示空间，并将预设展示空间展示给所述用户，所述预设展示空间包括预设虚拟空间以及预设虚拟产品。
较佳地，所述获取目标空间内的视频数据的步骤包括：调用摄像头采集所述目标空间内的视频数据，所述摄像头位于所述用户的智能终端上；
所述将所述虚拟模型添加入所述虚拟空间的步骤包括：
获取所述智能终端的姿态信息以及位置信息，并以所述姿态信息以及所述位置信息修正所述虚拟空间内的虚拟模型坐标系，以使所述虚拟模型坐标系的视角与所述摄像头的视角一致；
将所述虚拟模型添加入所述虚拟模型坐标系。
较佳地，所述虚拟空间内包括参考对象；
将所述虚拟模型添加入所述虚拟模型坐标系的步骤之后还包括：
计算所述参考对象的实际尺寸相对于所述参考对象在所述虚拟空间中的尺寸的缩放比例；
根据所述缩放比例调整所述虚拟模型在所述虚拟模型坐标系中的尺寸。
较佳地，所述获取所述用户的位置信息的步骤包括：获取所述用户移动时的实时坐标；所述判断所述位置信息是否满足预设条件的步骤包括：判断所述实时坐标是否属于预设坐标范围。
较佳地，所述利用所述视频数据构建虚拟空间的步骤包括：从所述视频数据中提取在时间上连续的预设帧数的静态图像；利用所述静态图像生成所述虚拟空间；
和/或，
所述将所述目标展示空间展示给所述用户的步骤之后还包括：获取所述用户的交互手势；根据所述交互手势对所述产品进行调整，所述调整包括缩放产品尺寸、移动产品位置、旋转展示产品、隐藏/再现产品的一种或多种。
一种基于增强现实的产品展示系统，所述产品展示系统包括：
视频数据获取模块，用于获取目标空间内的视频数据，所述目标空间为用户当前所处的环境空间；
虚拟空间构建模块，用于利用所述视频数据构建虚拟空间；
虚拟模型调用模块，用于获取所述用户选定的目标产品，并调取所述目标产品对应的虚拟模型；
融合模块，用于将所述虚拟模型添加入所述虚拟空间，以构成目标展示空间；
位置获取模块，用于获取所述用户的位置信息；
判断模块，用于判断所述位置信息是否满足预设条件；
若否，则调用第一展示模块，所述第一展示模块用于将所述目标展示空间展示给所述用户；
若是，则调用第二展示模块，所述第二展示模块用于隐藏所述目标展示空间，并将预设展示空间展示给所述用户，所述预设展示空间包括预设虚拟空间以及预设虚拟产品。
较佳地，所述视频数据获取模块用于调用摄像头采集所述目标空间内的视频数据，所述摄像头位于所述用户的智能终端上；
所述融合模块用于获取所述智能终端的姿态信息以及位置信息，并以所述姿态信息以及所述位置信息修正所述虚拟空间内的虚拟模型坐标系，以使所述虚拟模型坐标系的视角与所述摄像头的视角一致；所述融合模块还用于将所述虚拟模型添加入所述虚拟模型坐标系。
较佳地，所述虚拟空间内包括参考对象；
所述产品展示系统还包括计算模块以及尺寸调节模块，所述计算模块用于计算所述参考对象的实际尺寸相对于所述参考对象在所述虚拟空间中的尺寸的缩放比例；
所述尺寸调节模块用于根据所述缩放比例调整所述虚拟模型在所述虚拟模型坐标系中的尺寸。
较佳地，所述位置获取模块用于获取所述用户移动时的实时坐标；所述判断模块用于判断所述实时坐标是否属于预设坐标范围。
较佳地，所述虚拟空间构建模块用于从所述视频数据中提取在时间上连续的预设帧数的静态图像，并利用所述静态图像生成所述虚拟空间；
和/或，
所述产品展示系统还包括交互信息获取模块以及调整模块，所述交互信息获取模块用于获取所述用户的交互手势；所述调整模块用于根据所述交互手势对所述产品进行调整，所述调整包括缩放产品尺寸、移动产品位置、旋转展示产品、隐藏/再现产品的一种或多种。
一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行计算机程序时实现前述的基于增强现实的产品展示方法的步骤。
一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现前述的基于增强现实的产品展示方法的步骤。
本发明的积极进步效果在于：本发明实施例提供的基于增强现实的产品展示方法、系统、介质及电子设备不但可以以用户目前所处的真实环境为背景，构建虚拟的产品展示场景，还可以在用户走动的过程中触发场景切换条件后，为用户展示预设的完全虚拟的产品展示场景，因而可以满足用户在移动的过程中体验到在不同的虚拟空间的产品，给用户带来强烈新鲜感和沉浸感，提高了用户体验，进而提高了用户下单量。
附图说明
图1为本发明实施例1中的基于增强现实的产品展示方法的流程图。
图2为本发明实施例2中的基于增强现实的产品展示方法的流程图。
图3为本发明实施例3中的基于增强现实的产品展示系统的结构框图。
图4为本发明实施例4中的基于增强现实的产品展示系统的结构框图。
图5是用于实现本发明实施例5中的基于增强现实的产品展示方法的电子设备的结构示意图。
具体实施方式
下面通过实施例的方式进一步说明本发明，但并不因此将本发明限制在所述的实施例范围之中。
实施例1
本实施例提供了一种基于增强现实的产品展示方法，如图1所示，所述产品展示方法可以包括如下步骤：
步骤S10：获取目标空间内的视频数据，所述目标空间为用户当前所处的环境空间；
具体地，所述目标空间为现实中的真实空间，用户可以在目标空间内走动。
例如，若用户目前正站在广场上，则可以认为广场所处的开放空间为目标空间，若用户目前正处场馆内，则可以认为场馆内的封闭空间为目标空间。
接下来，可以执行步骤S11：利用所述视频数据构建虚拟空间；所述虚拟空间真实反映了用户所处的环境信息，并且可以被当作产品展示的背景空间。
步骤S12：获取所述用户选定的目标产品，并调取所述目标产品对应的虚拟模型；
用户可以选择有购买意向的具体产品(例如：冰箱)或产品大类(家用电器)，接收到用户的选择命令后，可以从数据库中调取存储的产品虚拟模型。
步骤S13：将所述虚拟模型添加入所述虚拟空间，以构成目标展示空间；
进一步地，所述虚拟模型被添加入所述虚拟空间内的预定位置，也可称为定位点(即锚点)。
本步骤可以将用户想要购买的产品对应的虚拟模型添加入前述建立完成的虚拟空间，从而构建起一个模拟在用户所处的真实环境中展示产品的目标展示空间，从而提高用户的沉浸感。
步骤S14：获取所述用户的位置信息；
步骤S15：判断所述位置信息是否满足预设条件；
若否，则执行步骤S16：将所述目标展示空间展示给所述用户；
若是，则执行步骤S17：隐藏所述目标展示空间，并将预设展示空间展示给所述用户，所述预设展示空间包括预设虚拟空间以及预设虚拟产品。
优选地，所述步骤S14可以通过如下步骤来实现：获取所述用户移动时的实时坐标。
所述步骤S15可以通过如下步骤来实现：判断所述实时坐标是否属于预设坐标范围。
用户可以在真实环境中走动，并且用户的位置坐标可以被实时监测，并且及时反馈到虚拟空间中，若用户走到某一个位置时，实时坐标超过了预设坐标，则可以认为用户触发了另一个场景的入口，此时，自动隐藏所述目标展示空间，并将预设展示空间展示给所述用户，所述预设展示空间包括预设虚拟空间以及预设虚拟产品。所述预设虚拟空间完全是虚拟的另一个购物空间，并且与用户目前所处的真实环境无关，预设虚拟产品是另一个购物空间中的展示的产品。其中，所述预设虚拟空间中设置的预设虚拟产品可以与前述的目标展示空间中的虚拟模型的产品种类相同或相关，从而可以为用户推荐更多有意向购买的产品，提高用户的下单概率。
当用户在真实场景中沿着原来前进的路径返回后，还可以隐藏所述预设展示空间，并且再次将目标展示空间展示给用户。
本实施例中，在将所述目标展示空间展示给用户或者将所述预设展示空间展示给用户用后，用户还可以与虚拟场景中的产品进行交互，即还可以获取所述用户的交互手势，然后根据所述交互手势对所述产品进行调整，所述调整包括缩放产品尺寸、移动产品位置、旋转展示产品、隐藏/再现产品的一种或多种。
本实施例提供的基于增强现实的产品展示方法不但可以以用户目前所处的真实环境为背景，构建虚拟的产品展示场景，还可以在用户走动的过程中触发场景切换条件后，为用户展示预设的完全虚拟的产品展示场景，因而可以满足用户在移动的过程中体验到在不同的虚拟空间的产品，给用户带来强烈新鲜感和沉浸感，提高了用户体验，进而提高了用户下单量。
实施例2
本实施例提供了一种基于增强现实的产品展示方法，如图2所示，所述产品展示方法是在实施例1基础上进一步改进。
本实施例中，所述步骤S10可以包括：
步骤S101：调用摄像头采集所述目标空间内的视频数据，所述摄像头位于所述用户的智能终端上；
所述智能终端可以是手机或平板电脑，用户可以手持所述智能终端，以使所述摄像头能够完整采集到用户所处的目标空间内的视频数据。
当用户手持所述智能终端时，所述用户的实时坐标可以通过检测所述智能终端的实时坐标来体现。
进一步地，在取得目标空间的视频数据后，所述步骤S11具体可以包括：
步骤S111：从所述视频数据中提取在时间上连续的预设帧数的静态图像；
步骤S112：利用所述静态图像生成所述虚拟空间；
为了保证虚拟模型与虚拟空间之间的融合没有突兀感，所述步骤S13可以包括如下步骤：
步骤S131：获取所述智能终端的姿态信息以及位置信息，并以所述姿态信息以及所述位置信息修正所述虚拟空间内的虚拟模型坐标系，以使所述虚拟模型坐标系的视角与所述摄像头的视角一致；
步骤S132：将所述虚拟模型添加入所述虚拟模型坐标系。
本实施例中，可以利用AR技术中的arkit框架或arcore框架来搭建所述虚拟空间，并且还可以利用Frostfire(三维模型渲染引擎)对虚拟模型进行渲染，所述渲染可以包括修改模型的材料属性、修改模型的颜色等。
优选地，所述利用所述姿态信息以及位置信息修正所述虚拟模型坐标系的具体原理如下：
构建ARCamera(摄像头)的世界变换矩阵TransformMatrix。
其中，摄像头的位置向量为P＝[Px,Py,Pz]，M00～M22存储了相机的旋转信息，并且相机在拍摄时没有缩放。
对所述世界变换矩阵TransformMatrix进行逆运算，以得到世界变换矩阵的逆矩阵，即视图变换矩阵ViewTransformMatrix。
其中，视图变换矩阵的Up向量可以表示为U＝[Ux,Uy,Uz]，视图变换矩阵的Look向量可以表示为D＝[-Dx,-Dy,-Dz]。
另外，R＝[Rx,Ry,Rz]代表向右的坐标轴，P·R代表向量P与向量R的点积，P·U代表向量P与向量U的点积，P·D代表向量P与向量D的点积。
所述位置向量、所述Up向量、所述Look向量可以用于表明所述摄像头的视角信息。由于用户在不停的移动，则摄像头也在不停的移动，所述位置向量、所述Up向量、所述Look向量也会实时改变，利用所述位置向量、所述Up向量、所述Look向量去实时修正所述虚拟模型坐标系以使所述虚拟模型坐标系的视角与所述摄像头的视角始终保持一致。
本实施例中，通过姿态信息及位置信息可以得知当前智能终端的运行方向、倾斜角度及与水平面的相对距离等信息，而摄像头的姿态信息及位置信息与智能终端的姿态信息及位置信息一致，当智能终端相对于地面倾斜一定角度时，可以认为摄像头的视角也沿着地面倾斜一定角度，此时，可以将虚拟模型坐标系也相对于水平线整体旋转相应角度，从而使得放入所述虚拟模型坐标系中的虚拟模型可以符合摄像头的视角。另外，沿着智能终端运行方向的正方向看去，虚拟产品应当是近大远小的视觉透视效果，从而使得展示的虚拟产品更加真实。
需要说明的是，在所述将预设展示空间展示给所述用户之前，也可以将所述预设展示空间的视角调整为与所述智能终端的摄像头的视角一致，从而使得场景切换之后，用户的视线可以很自然的过渡到预设展示空间。
进一步地，所述虚拟空间内还可以包括参考对象；
所述步骤S132之后还可以包括：
步骤S133：计算所述参考对象的实际尺寸相对于所述参考对象在所述虚拟空间中的尺寸的缩放比例；
步骤S134：根据所述缩放比例调整所述虚拟模型在所述虚拟模型坐标系中的尺寸。
由此，可以使得虚拟模型与虚拟空间的配合更加协调，进一步提高了用户的沉浸感。
本实施例提供的基于增强现实的产品展示方法可以通过将虚拟模型的透视视角与智能终端的摄像头的视角调节成一致，使得虚拟模型与虚拟空间有更高的契合度。另外，通过调整虚拟模型的尺寸，可以使得虚拟模型与虚拟空间的配合更加协调，进一步提高了用户的沉浸感。
实施例3
本实施例提供了一种基于增强现实的产品展示系统，如图3所示，所述产品展示系统可以包括：
视频数据获取模块110，用于获取目标空间内的视频数据，所述目标空间为用户当前所处的环境空间；具体地，所述目标空间为现实中的真实空间，用户可以在目标空间内走动。例如，若用户目前正站在广场上，则可以认为广场所处的开放空间为目标空间，若用户目前正处场馆内，则可以认为场馆内的封闭空间为目标空间。
虚拟空间构建模块111，用于利用所述视频数据构建虚拟空间；所述虚拟空间真实反映了用户所处的环境信息，并且可以被当作产品展示的背景空间。
虚拟模型调用模块112，用于获取所述用户选定的目标产品，并调取所述目标产品对应的虚拟模型；
本实施例中，用户可以选择有购买意向的具体产品(例如：冰箱)或产品大类(家用电器)，接收到用户的选择命令后，可以从数据库中调取存储的产品虚拟模型。
融合模块113，用于将所述虚拟模型添加入所述虚拟空间，以构成目标展示空间；
进一步地，所述虚拟模型被添加入所述虚拟空间内的预定位置，也可称为定位点(即锚点)。
所述融合模块113可以将用户想要购买的产品对应的虚拟模型添加入前述建立完成的虚拟空间，从而构建起一个模拟在用户所处的真实环境中展示产品的目标展示空间，从而提高用户的沉浸感。
位置获取模块114，用于获取所述用户移动时的实时坐标；
判断模块115，用于判断所述实时坐标是否超过预设坐标；
若否，则调用第一展示模块116，所述第一展示模块用于将所述目标展示空间展示给所述用户；
若是，则调用第二展示模块117，所述第二展示模块用于隐藏所述目标展示空间，并将预设展示空间展示给所述用户，所述预设展示空间包括预设虚拟空间以及预设虚拟产品。
进一步地，所述产品展示系统可以还包括交互信息获取模块118以及调整模块119，所述交互信息获取模块118用于获取所述用户的交互手势；所述调整模块119用于根据所述交互手势对所述产品进行调整，所述调整包括缩放产品尺寸、移动产品位置、旋转展示产品、隐藏/再现产品的一种或多种。
本实施例中，用户可以在真实环境中走动，并且用户的位置坐标可以被实时监测，并且及时反馈到虚拟空间中，若用户走到某一个位置时，实时坐标超过了预设坐标，则可以认为用户触发了另一个场景的入口，此时，自动隐藏所述目标展示空间，并将预设展示空间展示给所述用户，所述预设展示空间包括预设虚拟空间以及预设虚拟产品。所述预设虚拟空间完全是虚拟的另一个购物空间，并且与用户目前所处的真实环境无关，预设虚拟产品是另一个购物空间中的展示的产品。其中，所述预设虚拟空间中设置的预设虚拟产品可以与前述的目标展示空间中的虚拟模型的产品种类相同或相关，从而可以为用户推荐更多有意向购买的产品，提高用户的下单概率。
当用户在真实场景中沿着原来前进的路径返回后，还可以隐藏所述预设展示空间，并且再次将目标展示空间展示给用户。
本实施例提供的基于增强现实的产品展示系统在运行时，不但可以以用户目前所处的真实环境为背景，构建虚拟的产品展示场景，还可以在用户走动的过程中触发场景切换条件后，为用户展示预设的完全虚拟的产品展示场景，因而可以满足用户在移动的过程中体验到在不同的虚拟空间的产品，给用户带来强烈新鲜感和沉浸感，提高了用户体验，进而提高了用户下单量。
实施例4
本实施例提供了一种基于增强现实的产品展示系统，如图4所示，所述产品展示系统是在实施例3基础上的进一步改进。
进一步地，所述视频数据获取模块110用于调用摄像头采集所述目标空间内的视频数据，所述摄像头位于所述用户的智能终端上；
所述智能终端可以是手机或平板电脑，用户可以手持所述智能终端，以使所述摄像头能够完整采集到用户所处的目标空间内的视频数据。
当用户手持所述智能终端时，所述用户的实时坐标可以通过检测所述智能终端的实时坐标来体现。
所述虚拟空间构建模块111用于从所述视频数据中提取在时间上连续的预设帧数的静态图像，并利用所述静态图像生成所述虚拟空间；
为了保证虚拟模型与虚拟空间之间的融合没有突兀感，所述融合模块113还用于获取所述智能终端的姿态信息以及位置信息，并以所述姿态信息以及所述位置信息修正所述虚拟空间内的虚拟模型坐标系，以使所述虚拟模型坐标系的视角与所述摄像头的视角一致；所述融合模块还用于将所述虚拟模型添加入所述虚拟模型坐标系。
进一步地，所述虚拟空间内还可以包括参考对象；
所述产品展示系统还可以包括计算模块120以及尺寸调节模块121，所述计算模块120用于计算所述参考对象的实际尺寸相对于所述参考对象在所述虚拟空间中的尺寸的缩放比例；
所述尺寸调节模块121用于根据所述缩放比例调整所述虚拟模型在所述虚拟模型坐标系中的尺寸。
需要说明的是，在所述将预设展示空间展示给所述用户之前，所述调整模块119还可以将所述预设展示空间的视角调整为与所述智能终端的摄像头的视角一致，从而使得场景切换之后，用户的视线可以很自然的过渡到预设展示空间。
本实施例中，可以利用AR技术中的arkit框架或arcore框架来搭建所述虚拟空间，还可以利用Frostfire(三维模型渲染引擎)对虚拟模型进行渲染，所述渲染可以包括修改模型的材料属性、修改模型的颜色等。
优选地，所述利用所述姿态信息以及位置信息修正所述虚拟模型坐标系的具体原理如下：
构建ARCamera(摄像头)的世界变换矩阵TransformMatrix。
其中，摄像头的位置向量为P＝[Px,Py,Pz]，M00～M22存储了相机的旋转信息，并且相机在拍摄时没有缩放。
对所述世界变换矩阵TransformMatrix进行逆运算，以得到世界变换矩阵的逆矩阵，即视图变换矩阵ViewTransformMatrix。
其中，视图变换矩阵的Up向量可以表示为U＝[Ux,Uy,Uz]，视图变换矩阵的Look向量可以表示为D＝[-Dx,-Dy,-Dz]。
另外，R＝[Rx,Ry,Rz]代表向右的坐标轴，P·R代表向量P与向量R的点积，P·U代表向量P与向量U的点积，P·D代表向量P与向量D的点积。
所述位置向量、所述Up向量、所述Look向量可以用于表明所述摄像头的视角信息。由于用户在不停的移动，则摄像头也在不停的移动，所述位置向量、所述Up向量、所述Look向量也会实时改变，利用所述位置向量、所述Up向量、所述Look向量去实时修正所述虚拟模型坐标系以使所述虚拟模型坐标系的视角与所述摄像头的视角始终保持一致。
本实施例中，通过姿态信息及位置信息可以得知当前智能终端的运行方向、倾斜角度及与水平面的相对距离等信息，而摄像头的姿态信息及位置信息与智能终端的姿态信息及位置信息一致，当智能终端相对于地面倾斜一定角度时，可以认为摄像头的视角也沿着地面倾斜一定角度，此时，可以将虚拟模型坐标系也相对于水平线整体旋转相应角度，从而使得放入所述虚拟模型坐标系中的虚拟模型可以符合摄像头的视角。另外，沿着智能终端运行方向的正方向看去，虚拟产品应当是近大远小的视觉透视效果，从而使得展示的虚拟产品更加真实。
本实施例提供的基于增强现实的产品展示系统在运行时，可以通过将虚拟模型的透视视角与智能终端的摄像头的视角调节成一致，使得虚拟模型与虚拟空间有更高的契合度。另外，通过调整虚拟模型的尺寸，可以使得虚拟模型与虚拟空间的配合更加协调，进一步提高了用户的沉浸感。
实施例5
本发明还提供一种电子设备，如图5所示，所述电子设备可以包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行计算机程序时实现前述实施例1或实施例2中的基于增强现实的产品展示方法的步骤。
可以理解的是，图5所示的电子设备仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。
如图5所示，电子设备2可以以通用计算设备的形式表现，例如：其可以为服务器设备。电子设备2的组件可以包括但不限于：上述至少一个处理器3、上述至少一个存储器4、连接不同系统组件(包括存储器4和处理器3)的总线5。
所述总线5可以包括数据总线、地址总线和控制总线。
所述存储器4可以包括易失性存储器，例如随机存取存储器(RAM)41和/或高速缓存存储器42，还可以进一步包括只读存储器(ROM)43。
所述存储器4还可以包括具有一组(至少一个)程序模块44的程序工具45(或实用工具)，这样的程序模块44包括但不限于：操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。
所述处理器3通过运行存储在所述存储器4中的计算机程序，从而执行各种功能应用以及数据处理，例如本发明实施例1或实施例2中的基于增强现实的产品展示方法的步骤。
所述电子设备2也可以与一个或多个外部设备6(例如键盘、指向设备等)通信。这种通信可以通过输入/输出(I/O)接口7进行。并且，模型生成的电子设备2还可以通过网络适配器8与一个或者多个网络(例如局域网LAN，广域网WAN和/或公共网络)通信。
如图5所示，网络适配器8可以通过总线5与模型生成的电子设备2的其它模块通信。本领域技术人员应当明白，尽管图中未示出，可以结合模型生成的电子设备2使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理器、外部磁盘驱动阵列、RAID(磁盘阵列)系统、磁带驱动器以及数据备份存储系统等。
需要说明的是，尽管在上文详细描述中提及了电子设备的若干单元/模块或子单元/模块，但是这种划分仅仅是示例性的并非强制性的。实际上，根据本发明的实施方式，上文描述的两个或更多单元/模块的特征和功能可以在一个单元/模块中具体化。反之，上文描述的一个单元/模块的特征和功能可以进一步划分为由多个单元/模块来具体化。
实施例6
本实施例提供了一种计算机可读存储介质，其上存储有计算机程序，程序被处理器执行时实现实施例1或实施例2中的基于增强现实的产品展示方法的步骤。
其中，计算机可读存储介质可以采用的更具体方式可以包括但不限于：便携式盘、硬盘、随机存取存储器、只读存储器、可擦拭可编程只读存储器、光存储器件、磁存储器件或上述的任意合适的组合。
在可能的实施方式中，本发明还可以实现为一种程序产品的形式，其包括程序代码，当程序产品在终端设备上运行时，程序代码用于使终端设备执行实现实施例1或实施例2中的基于增强现实的产品展示方法的步骤。
其中，可以以一种或多种程序设计语言的任意组合来编写用于执行本发明的程序代码，程序代码可以完全地在用户设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户设备上部分在远程设备上执行或完全在远程设备上执行。
虽然以上描述了本发明的具体实施方式，但是本领域的技术人员应当理解，这仅是举例说明，本发明的保护范围是由所附权利要求书限定的。本领域的技术人员在不背离本发明的原理和实质的前提下，可以对这些实施方式做出多种变更或修改，但这些变更和修改均落入本发明的保护范围。
Claims (12)
1.一种基于增强现实的产品展示方法，其特征在于，所述产品展示方法包括：
获取目标空间内的视频数据，所述目标空间为用户当前所处的环境空间；
利用所述视频数据构建虚拟空间；
获取所述用户选定的目标产品，并调取所述目标产品对应的虚拟模型；
将所述虚拟模型添加入所述虚拟空间，以构成目标展示空间；
获取所述用户的位置信息；
判断所述位置信息是否满足预设条件；
若否，则将所述目标展示空间展示给所述用户；
若是，则隐藏所述目标展示空间，并将预设展示空间展示给所述用户，所述预设展示空间包括预设虚拟空间以及预设虚拟产品。
2.如权利要求1所述的基于增强现实的产品展示方法，其特征在于，
所述获取目标空间内的视频数据的步骤包括：调用摄像头采集所述目标空间内的视频数据，所述摄像头位于所述用户的智能终端上；
所述将所述虚拟模型添加入所述虚拟空间的步骤包括：
获取所述智能终端的姿态信息以及位置信息，并以所述姿态信息以及所述位置信息修正所述虚拟空间内的虚拟模型坐标系，以使所述虚拟模型坐标系的视角与所述摄像头的视角一致；
将所述虚拟模型添加入所述虚拟模型坐标系。
3.如权利要求2所述的基于增强现实的产品展示方法，其特征在于，所述虚拟空间内包括参考对象；
将所述虚拟模型添加入所述虚拟模型坐标系的步骤之后还包括：
计算所述参考对象的实际尺寸相对于所述参考对象在所述虚拟空间中的尺寸的缩放比例；
根据所述缩放比例调整所述虚拟模型在所述虚拟模型坐标系中的尺寸。
4.如权利要求1所述的基于增强现实的产品展示方法，其特征在于，
所述获取所述用户的位置信息的步骤包括：
获取所述用户移动时的实时坐标；
所述判断所述位置信息是否满足预设条件的步骤包括：
判断所述实时坐标是否属于预设坐标范围。
5.如权利要求1-4任一项所述的基于增强现实的产品展示方法，其特征在于，
所述利用所述视频数据构建虚拟空间的步骤包括：从所述视频数据中提取在时间上连续的预设帧数的静态图像；利用所述静态图像生成所述虚拟空间；
和/或，
所述将所述目标展示空间展示给所述用户的步骤之后还包括：获取所述用户的交互手势；根据所述交互手势对所述产品进行调整，所述调整包括缩放产品尺寸、移动产品位置、旋转展示产品、隐藏/再现产品的一种或多种。
6.一种基于增强现实的产品展示系统，其特征在于，所述产品展示系统包括：
视频数据获取模块，用于获取目标空间内的视频数据，所述目标空间为用户当前所处的环境空间；
虚拟空间构建模块，用于利用所述视频数据构建虚拟空间；
虚拟模型调用模块，用于获取所述用户选定的目标产品，并调取所述目标产品对应的虚拟模型；
融合模块，用于将所述虚拟模型添加入所述虚拟空间，以构成目标展示空间；
位置获取模块，用于获取所述用户的位置信息；
判断模块，用于判断所述位置信息是否满足预设条件；
若否，则调用第一展示模块，所述第一展示模块用于将所述目标展示空间展示给所述用户；
若是，则调用第二展示模块，所述第二展示模块用于隐藏所述目标展示空间，并将预设展示空间展示给所述用户，所述预设展示空间包括预设虚拟空间以及预设虚拟产品。
7.如权利要求6所述的基于增强现实的产品展示系统，其特征在于，
所述视频数据获取模块用于调用摄像头采集所述目标空间内的视频数据，所述摄像头位于所述用户的智能终端上；
所述融合模块用于获取所述智能终端的姿态信息以及位置信息，并以所述姿态信息以及所述位置信息修正所述虚拟空间内的虚拟模型坐标系，以使所述虚拟模型坐标系的视角与所述摄像头的视角一致；所述融合模块还用于将所述虚拟模型添加入所述虚拟模型坐标系。
8.如权利要求7所述的基于增强现实的产品展示系统，其特征在于，所述虚拟空间内包括参考对象；
所述产品展示系统还包括计算模块以及尺寸调节模块，所述计算模块用于计算所述参考对象的实际尺寸相对于所述参考对象在所述虚拟空间中的尺寸的缩放比例；
所述尺寸调节模块用于根据所述缩放比例调整所述虚拟模型在所述虚拟模型坐标系中的尺寸。
9.如权利要求6所述的基于增强现实的产品展示系统，其特征在于，
所述位置获取模块用于获取所述用户移动时的实时坐标；所述判断模块用于判断所述实时坐标是否属于预设坐标范围。
10.如权利要求6-9任一项所述的基于增强现实的产品展示系统，其特征在于，
所述虚拟空间构建模块用于从所述视频数据中提取在时间上连续的预设帧数的静态图像，并利用所述静态图像生成所述虚拟空间；
和/或，
所述产品展示系统还包括交互信息获取模块以及调整模块，所述交互信息获取模块用于获取所述用户的交互手势；所述调整模块用于根据所述交互手势对所述产品进行调整，所述调整包括缩放产品尺寸、移动产品位置、旋转展示产品、隐藏/再现产品的一种或多种。
11.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行计算机程序时实现权利要求1-5任一项所述的基于增强现实的产品展示方法的步骤。
12.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1-5任一项所述的基于增强现实的产品展示方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911053209.3A CN111739169B (zh) | 2019-10-31 | 2019-10-31 | 基于增强现实的产品展示方法、系统、介质及电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911053209.3A CN111739169B (zh) | 2019-10-31 | 2019-10-31 | 基于增强现实的产品展示方法、系统、介质及电子设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111739169A true CN111739169A (zh) | 2020-10-02 |
| CN111739169B CN111739169B (zh) | 2024-09-20 |
Family
ID=72646063
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201911053209.3A Active CN111739169B (zh) | 2019-10-31 | 2019-10-31 | 基于增强现实的产品展示方法、系统、介质及电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111739169B (zh) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113157775A (zh) * | 2021-05-06 | 2021-07-23 | 湖北经济学院 | 流域案件特征信息挖掘系统及设备 |
| CN113838217A (zh) * | 2021-09-23 | 2021-12-24 | 北京百度网讯科技有限公司 | 信息展示方法、装置、电子设备及可读存储介质 |
| CN113923435A (zh) * | 2021-08-26 | 2022-01-11 | 北京城市网邻信息技术有限公司 | 一种信息展示方法、设备及存储介质 |
| CN113918011A (zh) * | 2021-09-26 | 2022-01-11 | 平行空间(上海)科技有限公司 | 虚拟环境下的可视化对象、扩展现实设备以及应用方法 |
| CN114398132A (zh) * | 2022-01-14 | 2022-04-26 | 北京字跳网络技术有限公司 | 一种场景数据展示方法、装置、计算机设备和存储介质 |
| CN114627270A (zh) * | 2022-03-16 | 2022-06-14 | 深圳市博乐信息技术有限公司 | 一种基于ar/vr技术的虚拟空间共享方法及系统 |
| CN114967922A (zh) * | 2022-05-25 | 2022-08-30 | 北京沃东天骏信息技术有限公司 | 信息展示方法、装置、电子设备及存储介质 |
| CN116048241A (zh) * | 2022-06-14 | 2023-05-02 | 荣耀终端有限公司 | 一种提示方法、扩展现实设备及介质 |
| CN117235395A (zh) * | 2023-11-10 | 2023-12-15 | 山东捷瑞数字科技股份有限公司 | 一种基于云平台的展品信息展示方法、装置、设备及介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108537889A (zh) * | 2018-03-26 | 2018-09-14 | 广东欧珀移动通信有限公司 | 增强现实模型的调整方法、装置、存储介质和电子设备 |
| US20180276897A1 (en) * | 2015-09-30 | 2018-09-27 | Shenzhen Dlodlo Technologies Co., Ltd. | Method and Device for Adjusting Virtual Reality Image |
| CN109741462A (zh) * | 2018-12-29 | 2019-05-10 | 广州欧科信息技术股份有限公司 | 基于ar的展品导赏装置、方法及存储介质 |
| CN109919716A (zh) * | 2019-02-15 | 2019-06-21 | 上海扩博智能技术有限公司 | 基于增强现实的网购辅助方法、系统、设备及存储介质 |
-
2019
- 2019-10-31 CN CN201911053209.3A patent/CN111739169B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20180276897A1 (en) * | 2015-09-30 | 2018-09-27 | Shenzhen Dlodlo Technologies Co., Ltd. | Method and Device for Adjusting Virtual Reality Image |
| CN108537889A (zh) * | 2018-03-26 | 2018-09-14 | 广东欧珀移动通信有限公司 | 增强现实模型的调整方法、装置、存储介质和电子设备 |
| CN109741462A (zh) * | 2018-12-29 | 2019-05-10 | 广州欧科信息技术股份有限公司 | 基于ar的展品导赏装置、方法及存储介质 |
| CN109919716A (zh) * | 2019-02-15 | 2019-06-21 | 上海扩博智能技术有限公司 | 基于增强现实的网购辅助方法、系统、设备及存储介质 |
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113157775A (zh) * | 2021-05-06 | 2021-07-23 | 湖北经济学院 | 流域案件特征信息挖掘系统及设备 |
| CN113923435B (zh) * | 2021-08-26 | 2022-08-05 | 北京城市网邻信息技术有限公司 | 一种信息展示方法、设备及存储介质 |
| CN113923435A (zh) * | 2021-08-26 | 2022-01-11 | 北京城市网邻信息技术有限公司 | 一种信息展示方法、设备及存储介质 |
| CN113838217B (zh) * | 2021-09-23 | 2023-09-12 | 北京百度网讯科技有限公司 | 信息展示方法、装置、电子设备及可读存储介质 |
| CN113838217A (zh) * | 2021-09-23 | 2021-12-24 | 北京百度网讯科技有限公司 | 信息展示方法、装置、电子设备及可读存储介质 |
| CN113918011A (zh) * | 2021-09-26 | 2022-01-11 | 平行空间(上海)科技有限公司 | 虚拟环境下的可视化对象、扩展现实设备以及应用方法 |
| CN113918011B (zh) * | 2021-09-26 | 2024-09-17 | 平行空间(上海)科技有限公司 | 虚拟环境下的可视化对象、扩展现实设备以及应用方法 |
| CN114398132A (zh) * | 2022-01-14 | 2022-04-26 | 北京字跳网络技术有限公司 | 一种场景数据展示方法、装置、计算机设备和存储介质 |
| CN114398132B (zh) * | 2022-01-14 | 2024-05-10 | 北京字跳网络技术有限公司 | 一种场景数据展示方法、装置、计算机设备和存储介质 |
| CN114627270A (zh) * | 2022-03-16 | 2022-06-14 | 深圳市博乐信息技术有限公司 | 一种基于ar/vr技术的虚拟空间共享方法及系统 |
| CN114967922A (zh) * | 2022-05-25 | 2022-08-30 | 北京沃东天骏信息技术有限公司 | 信息展示方法、装置、电子设备及存储介质 |
| CN116048241A (zh) * | 2022-06-14 | 2023-05-02 | 荣耀终端有限公司 | 一种提示方法、扩展现实设备及介质 |
| CN117235395A (zh) * | 2023-11-10 | 2023-12-15 | 山东捷瑞数字科技股份有限公司 | 一种基于云平台的展品信息展示方法、装置、设备及介质 |
| CN117235395B (zh) * | 2023-11-10 | 2024-03-08 | 山东捷瑞数字科技股份有限公司 | 一种基于云平台的展品信息展示方法、装置、设备及介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111739169B (zh) | 2024-09-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111739169B (zh) | 基于增强现实的产品展示方法、系统、介质及电子设备 | |
| US10924676B2 (en) | Real-time visual effects for a live camera view | |
| Chi et al. | Research trends and opportunities of augmented reality applications in architecture, engineering, and construction | |
| Mossel et al. | 3DTouch and HOMER-S: intuitive manipulation techniques for one-handed handheld augmented reality | |
| US10438262B1 (en) | Method and device for implementing a virtual browsing experience | |
| US20140248950A1 (en) | System and method of interaction for mobile devices | |
| CN103761667A (zh) | 虚拟现实电子商务平台系统及其应用方法 | |
| CN114387400A (zh) | 三维场景的显示方法、显示装置、电子设备和服务器 | |
| CN108572772A (zh) | 图片内容呈现方法及装置 | |
| CN114782661B (zh) | 下半身姿态预测模型的训练方法及装置 | |
| CN110120087A (zh) | 三维虚拟沙盘的标签标注方法、装置及终端设备 | |
| CN115047976A (zh) | 基于用户交互的多层次ar展示方法、装置和电子设备 | |
| CN106683152B (zh) | 三维视觉效果模拟方法及装置 | |
| WO2024175009A1 (zh) | 用于在虚拟环境中交互的方法、装置、设备和存储介质 | |
| CN113849112B (zh) | 适用于电网调控的增强现实交互方法、装置及存储介质 | |
| US20200226833A1 (en) | A method and system for providing a user interface for a 3d environment | |
| CN116524088B (zh) | 珠宝虚拟试戴方法、装置、计算机设备和存储介质 | |
| López et al. | Head-tracking virtual 3-D display for mobile devices | |
| CN113421343B (zh) | 基于增强现实观测设备内部结构的方法 | |
| CN114327174A (zh) | 虚拟现实场景的显示方法、光标的三维显示方法和装置 | |
| CN114327063A (zh) | 目标虚拟对象的交互方法、装置、电子设备及存储介质 | |
| CN113360064A (zh) | 对图片的局部区域的搜索方法及装置、介质及电子设备 | |
| JP2024506879A (ja) | 仮想表現を提示するための方法及び装置、コンピュータ機器及び記憶媒体 | |
| JPH1166351A (ja) | ３次元仮想空間内部におけるオブジェクト動作制御方法および装置とオブジェクト動作制御プログラムを記録した記録媒体 | |
| CN114067084A (zh) | 图像展示方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |