CN109584375A - 一种物体信息显示方法及移动终端 - Google Patents

Abstract

本发明提供了一种物体信息显示方法及移动终端，包括：获取物体的深度信息；根据目标物体的深度信息和尺寸信息，建立目标物体的物体模型；建立包括目标参照物模型和目标物体模型的虚拟场景；显示虚拟场景，本发明利用物体的深度信息建立包括目标物体模型和目标参照物模型的虚拟场景，并在移动终端进行展示，使得在该场景中用户可以通过参照物模型与物体模型的直观视觉对比，实现对物体大小的感知和判断，且根据物体的深度信息和尺寸信息建立的物体模型的尺寸精确度更高，提高了对展示物体大小的描述精确度。

Description

一种物体信息显示方法及移动终端

技术领域

本发明实施例涉及通信技术领域，尤其涉及一种物体信息显示方法及移动终端。

背景技术

在日常生活中，我们经常会遇到需要对物体大小进行描述的场景，如，在网上浏览商品、和别人讨论商品等，在谈到关于商品的尺寸大小时，若其中一方无法观看到具体的商品，则需要另一方提供对该商品的大小的描述，实现两者对该商品大小的认知的统一。

现有技术中，讨论某物体的大小的双方实现对该物体大小的认知统一，具体是通过已经知晓该物体大小的描述者，引入参照物，将该物体的大小与参照物进行对比，并通过相应组织的语言对理解者进行描述，如，XX手机，大概有一听灌装可乐那么大。或者，描述者通过手绘一张描述该物体的大小的图画，以便理解者进行理解。

但是，目前方案中，由于主观意识的差异，描述者和理解者对物体大小的理解经常达不成一致，仅通过对物体的语言描述或简单绘画描述，易造成对物体大小的描述的精确度较低的问题。

发明内容

本发明实施例提供一种物体信息显示方法及移动终端，以解决现有技术中由于主观意识的差异，描述者和理解者对物体大小的理解经常达不成一致，从而造成对物体大小的描述的精确度较低的问题。

第一方面，本发明实施例提供了一种物体信息显示方法，应用于移动终端，该方法包括：

获取目标物体的深度信息和尺寸信息；

根据所述目标物体的深度信息和尺寸信息，建立所述目标物体的目标物体模型；

建立包括目标参照物模型和所述目标物体模型的虚拟场景；

显示所述虚拟场景。

第二方面，本发明实施例提供了一种移动终端，该移动终端包括：

获取模块，用于获取目标物体的深度信息；

第一建立模块，用于根据所述目标物体的深度信息和尺寸信息，建立所述目标物体的物体模型；

第二建立模块，用于建立包括目标参照物模型和所述目标物体模型的虚拟场景；

展示模块，用于显示所述虚拟场景。

第三方面，本发明实施例还提供了一种移动终端，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如本发明提供的物体信息显示方法的步骤。

第四方面，本发明实施例还提供了一种可读存储介质，当所述存储介质中的指令由电子设备的处理器执行时，使得电子设备能够执行如本发明提供的物体信息显示方法的步骤。

在本发明实施例中，移动终端可以获取物体的深度信息；根据目标物体的深度信息和尺寸信息，建立目标物体的物体模型；建立包括目标参照物模型和目标物体模型的虚拟场景；显示虚拟场景，本发明利用物体的深度信息建立包括目标物体模型和目标参照物模型的虚拟场景，并在移动终端进行展示，使得在该场景中用户可以通过参照物模型与物体模型的直观视觉对比，实现对物体大小的感知和判断，且根据物体的深度信息和尺寸信息建立的物体模型的尺寸精确度更高，提高了对展示物体大小的描述精确度。

上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。

附图说明

图1是本发明实施例提供的一种物体信息显示方法的步骤流程图；

图2是本发明实施例提供的一种物体信息显示方法的界面图

图3是本发明实施例提供的另一种物体信息显示方法的界面图；

图4是本发明实施例提供的另一种物体信息显示方法的步骤流程图；

图5是本发明实施例提供的一种物体深度信息的获取场景图；

图6是本发明实施例提供的另一种物体信息显示方法的界面图；

图7是本发明实施例提供的另一种物体信息显示方法的界面图；

图8是本发明实施例提供的另一种物体信息显示方法的界面图；

图9是本发明实施例提供的另一种物体信息显示方法的界面图；

图10是本发明实施例提供的另一种物体信息显示方法的界面图；

图11是本发明实施例提供的一种移动终端的框图；

图12是本发明另一个实施例的移动终端的框图；

图13是本发明另一个实施例的移动终端的结构示意图。

具体实施方式

下面将参照附图更详细地描述本发明的示例性实施例。虽然附图中显示了本发明的示例性实施例，然而应当理解，可以以各种形式实现本发明而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本发明，并且能够将本发明的范围完整的传达给本领域的技术人员。

图1是本发明实施例提供的一种物体信息显示方法的步骤流程图，如图1所示，该方法可以包括：

步骤101、获取目标物体的深度信息和尺寸信息。

深度信息的感知是人类产生立体物体视觉的前提，深度信息是指图像中存储每个像素所用的位数，其确定了彩色图像的每个像素可能有的色彩数，或者确定灰度图像的每个像素可能有的灰度级数。

在现实中，物体在人眼的观察范围内，存在由近到远深度变化，如，一把直尺水平放置在桌面上，用户站着直尺的刻度起点一端进行观看，视觉范围内存在直尺的刻度由小变大的趋势，且随着视线向直尺的另一端移动，会有刻度之间的间隔不断缩小的感觉，这就是深度信息对人类视觉的影响。

在计算机视觉领域，物体的深度视图可以是一张灰度图，包含每个像素点的深度信息，深度信息的大小表现在灰度的深浅，灰度图通过灰度渐变表示了代表物体距摄像头的远近程度。

因此，在本发明实施例中，为了提供给用户更加准确的目标物体的大小描述，可以在移动终端中实现对该目标物体的模拟展示，而为了保证展示效果的精准，可以获取目标物体的深度信息，以确保该目标物体的展示符合人类的视觉需求。

具体的，深度信息的获取方式可以有多种，如，在一种实现方案中，目前的移动终端可以包括有双目摄像头的配置，因此获取目标物体的深度信息可以通过被动测距传感的方法进行实现，该方法通过两个相隔一定距离的摄像头同时获取同一目标物体的两幅图像，并通过立体匹配算法找到两幅图像中对应的像素点，随后根据三角原理计算出视差信息，而视差信息通过转换可得到用于表征场景中目标物体的深度信息。

在另一种实现方案中，还可以通过主动测距传感的方法实现获取目标物体的深度信息，主动测距传感相比较于被动测距传感最明显的特征是：利用设备本身发射的能量来完成深度信息的采集，这也就保证了深度图像的获取独立于彩色图像的获取，因此，在本发明实施例中，可以通过移动终端对目标物体发射连续的近红外脉冲，然后利用移动终端的传感器接收由目标物体反射回的光脉冲，通过比较发射光脉冲与经过目标物体反射的光脉冲的相位差，可以推算得到光脉冲之间的传输延迟进而得到目标物体相对于发射器的距离，最终得到一幅包含了目标物体深度信息的深度图像。

在本发明实施例中，在描述者向理解者描述一件目标物体的大小的场景下，目标物体的尺寸信息，可以由多种方式得到，比如，当该目标物体为网购应用中的一件商品时，描述者可以在该商品的详情页面中找到该目标物体的尺寸信息，并将该尺寸信息进行记录，通过如图2所示的界面图，先点击创建按钮21，再在弹出的尺寸输入框20中输入记录的尺寸信息，完成尺寸信息的录入。当该目标物体为描述者面前的一件实体目标物体时，描述者可以通过测量工具进行目标物体的测量，得到目标物体的尺寸信息。当然还有多种获取目标物体的尺寸信息的方法和场景，本发明实施例不一一赘述，在本发明实施例中，移动终端可以接收由描述者发送的物品的深度信息和尺寸信息，另外，在仅有理解者的场景中，理解者也可以通过移动终端自行对目标物体进行测量，获取目标物体的深度信息和尺寸信息。

步骤102、根据所述目标物体的深度信息和尺寸信息，建立所述目标物体的目标物体模型。

进一步的，通过目标物体的深度信息和尺寸信息建立目标物体的物体模型，在一种实现方式中具体可以通过即时定位与地图构建(SLAM，Simultaneous localization andmapping)来实现，SLAM提供了一种建模概念，即通过一个假象的机器人从未知环境的未知地点出发，在运动过程中通过重复观测到的地图特征(比如，墙角，柱子等)定位自身位置和姿态，再根据自身位置增量式的构建地图，从而达到同时定位和地图构建的目的。

具体的，可以将SLAM建模应用在计算机视觉领域中，具体为，将目标物体的深度信息和尺寸信息作为SLAM建模模型的输入，使得虚拟的建模机器人以深度信息和尺寸信息为移动的位置坐标，以建模机器人的不断移动所产生的路径实现对该目标物体的构建，将目标物体的模型作为SLAM建模模型的最终输出。

步骤103，建立包括目标参照物模型和所述目标物体模型的虚拟场景。

在该步骤中，为了达到对目标物体大小的直观展示效果，可以通过引入包括目标参照物模型和目标物体模型的虚拟场景，用户利用对目标参照物与目标物体的对比，做出对目标物体大小的感知和判断，其中，目标参照物可以不为描述者和理解者双方都有共识的物体，而仅为理解者容易理解和确定的物体即可。

例如，参照图3，示出了本发明实施例提供的一种物体信息显示方法的界面图，其中，参照物模型11可以为移动终端所处场景中的一件实体桌子，移动终端可以通过摄像模组拍摄该桌子，获取该桌子的深度信息及尺寸信息，建立对应的参照物模型11，进一步的，可以将目标物体的物体模型10与参照物模型11共同放置于所建立的虚拟场景中，以使得用户利用目标参照物的对比，实现对目标物体大小的感知和判断。

步骤104，显示所述虚拟场景。

在本发明实施例中，移动终端可以通过显示屏展示包括目标参照物模型和目标物体模型的虚拟场景，使得用户通过直观的视觉感受以及目标参照物的对比，实现对目标物体大小的感知和判断。

需要说明的是，在另一种实现方式中，虚拟场景可以为虚拟现实(VR，VirtualReality)场景，移动终端可以将虚拟场景的显示信号发送至VR显示设备进行显示，用户可以通过VR显示设备观看虚拟场景，达到更好的体验效果。

综上，本发明实施例提供的一种物体信息显示方法，包括：获取物体的深度信息；根据目标物体的深度信息和尺寸信息，建立目标物体的物体模型；建立包括目标参照物模型和目标物体模型的虚拟场景；显示虚拟场景，本发明利用物体的深度信息建立包括目标物体模型和目标参照物模型的虚拟场景，并在移动终端进行展示，使得在该场景中用户可以通过参照物模型与物体模型的直观视觉对比，实现对物体大小的感知和判断，且根据物体的深度信息和尺寸信息建立的物体模型的尺寸精确度更高，提高了对展示物体大小的描述精确度。

图4是本发明实施例提供的另一种物体信息显示方法的步骤流程图，如图4所示，该方法可以包括：

步骤201、获取目标物体的深度信息和尺寸信息。

本步骤的实现方式与上述步骤101的实现过程类似，本发明实施例在此不再详述。

可选的，在本发明实施例的一种实现方式中，移动终端包括：飞行时间模组，步骤201还可以包括：

子步骤2011，通过所述飞行时间模组的发射端，向所述目标物体发射第一光脉冲信号，并记录所述第一光脉冲信号由所述发射端到达所述目标物体所花费的第一时间。

在本发明实施例中，飞行时间(TOF，Time of flight)模组是一种利用飞行时间测距法，测量目标物体的深度信息的装置，TOF模组拥有五大核心的硬件单元，分别为包括发射端的发射单元、具有光学透镜接收端的成像传感器、控制单元，以及计算单元。

其中，发射单元可以在控制单元的控制下，通过发射端向目标物体发射持续不断的第一光脉冲信号，并由计算单元计算第一光脉冲信号由发射端到达目标物体所花费的第一时间。

子步骤2012，通过所述飞行时间模组的接收端，接收由所述目标物体反射回的第二光脉冲信号，并记录所述第二光脉冲信号由所述目标物体反射至所述接收端所花费的第二时间。

在该步骤中，当第一光脉冲信号达到目标物体表面时，会被目标物体表面反方向进行反射，从而由目标物体反射回飞行时间模组的接收端，该接收端可以为包括光学透镜接收端的成像传感器，通过透镜表面接收由目标物体反射回的第二光脉冲信号，并由计算单元计算第二光脉冲信号由目标物体反射至接收端所花费的第二时间。

子步骤2013，根据所述第一时间和所述第二时间，计算得到所述目标物体的深度信息。

在该步骤中，可以通过计算单元记录的第一时间和第二时间，进行目标物体深度信息的计算，具体包括，通过计算入射光与反射光相对相移关系，即可求取距离信息，例如入射光与反射光之间同步信号发生10皮秒的偏移，就相当于1.5毫米的位移。

具体的，飞行时间模组控制单元打开发射单元然后再关闭，发出一个第一光脉冲信号。在同一时刻，控制单元打开和关闭接收端的电子快门，接收端接收到的第二光脉冲信号的电荷S0被存储在成像传感器的感光元件中。

之后，控制单元第二次打开并关闭发射单元，这次快门打开时间较晚，即在光源被关闭的时间点打开，新接收到的电荷S1也被存储起来，因为单个光脉冲的持续时间非常短，此过程会重复几千次，直到达到曝光时间，然后成像传感器中的值会被读出，实际距离可以根据这些值来计算。

记光的速度为c，tp为光脉冲的持续时间，S0表示较早的快门收集的电荷，S1表示延迟的快门收集的电荷，那么距离d可以由如下公式进行计算：d＝c/2×tp×(S1/S1+S0)，通过对目标物体的表面所有位置进行距离测量，并按照目标物体表面位置与距离d的对应关系进行数据统一处理，即可得到目标物体的深度信息。

需要说明的是，为了测量整个三维目标物体的表面的深度信息，可以利用单点TOF相机通过逐点扫描方式获取被探测目标物体三维几何结构，也可以通过面阵式TOF相机，其只需拍摄一张场景图片即可实时获取整个场景的表面几何结构信息。

在实际应用中，TOF相机的工作距离为0.4米至5米之间，计算得到的深度信息的绝对精度为1％，相对精度为0.5％，适用于全天候场景。

可选的，在本发明实施例的一种实现方式中，移动终端包括：双目摄像模组，双目摄像模组包括第一摄像头和第二摄像头；步骤201还可以包括：

子步骤2014，获取由所述第一摄像头对所述目标物体拍摄得到的第一图像。

在本发明实施例中，双目摄像模组包括两台光心固定且关心间距固定的第一摄像头和第二摄像头，是一种基于双目视差原理并由多幅图像获取目标物体的三维几何信息的装置。

利用双目摄像模组获取目标物体的深度信息实际操作包括4个步骤：相机标定—双目校正—双目匹配—计算深度信息。

其中，相机标定是对摄像头由于光学透镜的特性使得成像存在的畸变的消除过程，通过相机标定，可以得到第一摄像头和第二摄像头的内外参数以及畸变参数。

在该步骤中，在第获取到第一摄像头对目标物体拍摄得到的第一图像后，利用相机标定得出的内外参数以及畸变参数，对第一图像进行畸变消除和行对准处理，得到无畸变的第一图像。

子步骤2015，获取由所述第人摄像头对所述目标物体拍摄得到的第二图像。

该步骤的具体操作可以参照上述子步骤2014中对第一图像的处理过程，此处不再赘述。

子步骤2016，将所述第一图像与所述第二图像进行双目匹配处理，得到视差值。

在该步骤中，双目匹配的作用是把同一场景在左右视图(即第一图像和第二图像)上对应的像素点匹配起来，这样做的目的是为了得到视差值。得到视差值后，可以进一步进行计算深度信息的操作。

子步骤2017，根据所述双目摄像模组的焦距、所述第一摄像头和所述第二摄像头的光心间距和所述视差值，计算得到所述目标物体的深度信息。

在该步骤中，参照图5，示出了本发明实施例提供的一种目标物体深度信息的获取场景图，其中，P是目标物体上某一点，OR与OT分别是第一摄像头和第二摄像头的光心，点P在两个第一摄像头和第二摄像头的感光器上的成像点分别为P和P’(摄像头的成像平面经过旋转后放在了镜头前方)，f为相机焦距，B为两相机中心距，Z为深度信息，设点P到点P’的距离为dis，则：dis＝B-)Xr-Xt)，再根据相似三角形原理:B-(Xr-Xt)/B＝(Z-f)/Z，可以得到Z＝(fB)/(Xr-Xt)。

因此，根据双目摄像模组的焦距、第一摄像头和第二摄像头的光心间距和视差值，可以计算得到目标物体的深度信息。通过双目摄像模组计算目标物体深度信息的方案不需要激光光源，工作距离为2米之内，能够满足日常需求。

步骤202、根据所述目标物体的深度信息和尺寸信息，建立所述目标物体的目标物体模型。

本步骤的实现方式与上述步骤102的实现过程类似，本发明实施例在此不再详述。

步骤203、将距离所述移动终端最近的物体确定为目标参照物。

在该步骤中，在选择目标参照物的时候，优选的可以选取距离移动终端最近的物体作为目标参照物，确定距离移动终端最近的物体具体可以通过移动终端的摄像模组的测距功能实现，如，定位和确定摄像模组拍摄范围内的所有物体，并计算摄像模组距离各个物体之间的距离，确定一距离移动终端最近的物体作为目标参照物。

步骤204，获取所述目标参照物的深度信息和尺寸信息。

本步骤中，获取目标参照物的深度信息和尺寸信息的实现方式与上述步骤101的实现过程类似，本发明实施例在此不再详述。

步骤205，根据所述目标参照物的深度信息和尺寸信息，建立所述目标参照物的目标参照物模型。

在该步骤中，可以利用SLAM建模技术，实现根据目标参照物的深度信息和尺寸信息建立目标参照物的目标参照物模型的过程，具体实现方式可以参照上述步骤102。

步骤206、基于所述目标参照物模型和所述目标物体模型，建立虚拟场景。

具体的，为了提高用户体验度，也可以丰富虚拟场景的内容，除了将目标参照物模型和目标物体模型添加进建立的所述虚拟场景之外，还可以在虚拟场景中生成相应的场景背景，或者为目标参照物模型和目标物体模型添加相应的尺寸描述信息等，其中，参照图6，示出了本发明实施例提供的一种物体信息显示方法的界面图，图6示出了为目标物体模型10添加相应的尺寸描述信息的效果展示。

需要说明的是，在本发明实施例的另一种实现方式中，还可以通过步骤A1，步骤A2，步骤A3来替换上述步骤203至步骤206。

步骤A1，接收用户的输入。

步骤A2，将所述输入所选取的参照物模型确定为目标参照物模型。

在本发明实施例的另一种实现方式中，参照图7，示出了本发明实施例提供的一种物体信息显示方法的界面图，其中，移动终端中可以预先储存有多个参照物模型，以供用户进行选择，图7中储存了3个参照物模型：参照物1、参照物2和参照物3，假设用户选取了参照物2，并点解了“添加”按钮，则可以将参照物2对应的模型作为目标参照物模型。

步骤A3，基于所述目标参照物模型和所述目标物体模型，建立虚拟场景。

因此，目标参照物模型可以为移动终端中预置的几个具有明确尺寸的常用参照物的建模，用户可以根据自己的需求，选择一个或多个预置参照建模进行展示。

步骤207、显示所述虚拟场景。

本步骤的实现方式与上述步骤104的实现过程类似，本发明实施例在此不再详述。

可选的，在本发明实施例的一种实现方式中，步骤207还可以包括：

子步骤2071、在所述目标物体模型和所述目标参照物模型包括至少一个棱角的情况下，确定所述目标物体模型的第一棱角点和所述目标参照物模型的第二棱角点，所述第二棱角点为距离所述移动终端最近的棱角点。

参照图8，示出了本发明实施例提供的另一种物体信息显示方法的界面图，其中，目标参照物模型11可以为一个透视化处理后的立方体，目标物体可以为具有多个棱角的牛奶盒，则可以确定目标物体模型10的左下角的棱角点为第一棱角点，确定目标参照物模型11距离移动终端最近的棱角点(左下角的棱角点)为第二棱角点。

子步骤2072、在所述虚拟场景中，移动所述目标物体模型或所述目标参照物模型，以使所述目标物体模型的第一棱角点和所述目标参照物模型的第二棱角点重合。

在该步骤中，参照图8，在所述虚拟场景中，将所展示的目标物体模型10或目标参照物模型11的位置进行移动，使得目标物体模型10的第一棱角点和目标参照物模型11的第二棱角点重合，方便用户通过直观的可视化对比，实现目标物体大小的感知和判断。

可选的，在本发明实施例的另一种实现方式中，步骤207还可以包括：

子步骤2073、在所述目标物体模型和所述目标参照物模型包括至少一个侧边的情况下，确定所述目标物体模型的第一侧边和所述目标参照物模型的第二侧边，所述第二侧边为距离所述移动终端最近的侧边。

参照图9，示出了本发明实施例提供的另一种物体信息显示方法的界面图，其中，目标参照物模型11可以为一个透视化处理后的立方体，目标物体可以为另一大小的立方体，则可以确定目标物体模型10的ab边为第一侧边，确定目标参照物模型11距离移动终端最近的边cd为第二侧边。

子步骤2074、在所述虚拟场景中，移动所述目标物体模型或所述目标参照物模型，以使所述目标物体模型的第一侧边和所述目标参照物模型的第二侧边重合。

在该步骤中，参照图9，在所述虚拟场景中，将所展示的目标物体模型10或目标参照物模型11的位置进行移动，使得目标物体模型10的ab边和所述目标参照物模型11的cd边重合，方便用户通过直观的可视化对比，实现目标物体大小的感知和判断。

可选的，在本发明实施例的另一种实现方式中，步骤207还可以包括：

子步骤2075、在所述虚拟场景中，移动所述目标物体模型或所述目标参照物模型，以使所述目标物体模型的第一质心和所述目标参照物模型的第二质心重合。

在该步骤中，参照图10，示出了本发明实施例提供的另一种物体信息显示方法的界面图，其中，目标参照物模型11可以为一个透视化处理后的球体，目标物体可以为另一大小的球体，则可以确定目标物体模型10的球心为第一质心，确定目标参照物模型11距离移动终端最近的球心为第二质心。

通过将所展示的目标物体模型10或目标参照物模型11的位置进行移动，使得目标物体模型10的第一质心和所述目标参照物模型11的第二质心重合，方便用户通过直观的可视化对比，实现目标物体大小的感知和判断。

需要说明的是，每次测量的物体都会将相关数据进行存储，如果用户想了解之前测量过的物体大小是否契合当前环境，可以直接在历史记录里选择某一条数据显示，系统将在当前离摄像头最近的物体的基础上，将该物体的长、宽、高数据重绘出来，以方便用户结合当前场景参考物体的尺寸情况。

另外，用户还可以在退出应用又重新进入后，继续显示上一次测量的轮廓，系统将在当前离摄像头最近的物体的基础上，将长、宽、高数据重绘出来，以方便用户结合当前场景参考物体的尺寸情况。如果用户想知道购物软件、他人描述中的一个物体的尺寸数据大小规模，可以点击新增按钮，在弹出的尺寸输入对话框中手动输入尺寸数据。

综上所述，本发明实施例提供的另一种物体信息显示方法，包括：获取物体的深度信息；根据目标物体的深度信息和尺寸信息，建立目标物体的物体模型；建立包括目标参照物模型和目标物体模型的虚拟场景；显示虚拟场景，本发明利用物体的深度信息建立包括目标物体模型和目标参照物模型的虚拟场景，并在移动终端进行展示，使得在该场景中用户可以通过参照物模型与物体模型的直观视觉对比，实现对物体大小的感知和判断，且根据物体的深度信息和尺寸信息建立的物体模型的尺寸精确度更高，提高了对展示物体大小的描述精确度。

图11是本发明实施例提供的一种移动终端的框图，如图11所示，该移动终端30包括：

获取模块301，用于获取目标物体的深度信息和尺寸信息；

可选的，移动终端包括：飞行时间模组，所述获取模块301包括：

第一记录子模块，用于通过所述飞行时间模组的发射端，向所述目标物体发射第一光脉冲信号，并记录所述第一光脉冲信号由所述发射端到达所述目标物体所花费的第一时间；

第二记录子模块，用于通过所述飞行时间模组的接收端，接收由所述目标物体反射回的第二光脉冲信号，并记录所述第二光脉冲信号由所述目标物体反射至所述接收端所花费的第二时间；

第一计算子模块，用于根据所述第一时间和所述第二时间，计算得到所述目标物体的深度信息。

可选的，移动终端包括：双目摄像模组，所述双目摄像模组包括第一摄像头和第二摄像头；所述获取模块301包括：

第一获取子模块，用于获取由所述第一摄像头对所述目标物体拍摄得到的第一图像；

第二获取子模块，用于获取由所述第人摄像头对所述目标物体拍摄得到的第二图像；

匹配子模块，用于将所述第一图像与所述第二图像进行双目匹配处理，得到视差值；

第二计算子模块，用于根据所述双目摄像模组的焦距、所述第一摄像头和所述第二摄像头的光心间距和所述视差值，计算得到所述目标物体的深度信息。

第一建立模块302，用于根据所述目标物体的深度信息和尺寸信息，建立所述目标物体的物体模型；

第二建立模块303，用于建立包括目标参照物模型和所述目标物体模型的虚拟场景；

可选的，第二建立模块包括：

第一确定子模块，用于将距离所述移动终端最近的物体确定为目标参照物；

第三获取子模块，用于获取所述目标参照物的深度信息和尺寸信息；

建立子模块，用于根据所述目标参照物的深度信息和尺寸信息，建立所述目标参照物的目标参照物模型；

添加子模块，用于基于所述目标参照物模型和所述目标物体模型，建立虚拟场景。

展示模块304，用于显示所述虚拟场景。

可选的，展示模块包括：

第二确定子模块，用于在所述目标物体模型和所述目标参照物模型包括至少一个棱角的情况下，确定所述目标物体模型的第一棱角点和所述目标参照物模型的第二棱角点，所述第二棱角点为距离所述移动终端最近的棱角点；

移动子模块，用于在所述虚拟场景中，移动所述目标物体模型或所述目标参照物模型，以使所述目标物体模型的第一棱角点和所述目标参照物模型的第二棱角点重合。

综上所述，本发明实施例提供的一种移动终端，包括，获取物体的深度信息；根据目标物体的深度信息和尺寸信息，建立目标物体的物体模型；建立包括目标参照物模型和目标物体模型的虚拟场景；显示虚拟场景，本发明利用物体的深度信息建立包括目标物体模型和目标参照物模型的虚拟场景，并在移动终端进行展示，使得在该场景中用户可以通过参照物模型与物体模型的直观视觉对比，实现对物体大小的感知和判断，且根据物体的深度信息和尺寸信息建立的物体模型的尺寸精确度更高，提高了对展示物体大小的描述精确度。

本发明实施例还提供一种移动终端，包括处理器，存储器，存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现上述物体信息显示方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

本发明实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现上述物体信息显示方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。其中，所述的计算机可读存储介质，如只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(Random AccessMemory，简称RAM)、磁碟或者光盘等。

图12是本发明另一个实施例的移动终端的框图。图12所示的移动终端500包括：至少一个处理器501、存储器502、至少一个网络接口504、用户接口503和摄像头506。移动终端500中的各个组件通过总线系统505耦合在一起。可理解，总线系统505用于实现这些组件之间的连接通信。总线系统505除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图12中将各种总线都标为总线系统505。

其中，用户接口503可以包括显示器、键盘或者点击设备(例如，鼠标，轨迹球(trackball)、触感板或者柔性屏等。

可以理解，本发明实施例中的存储器502可以是易失性存储器或非易失性存储器，或可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(Read-OnlyMemory，ROM)、可编程只读存储器(ProgrammableROM，PROM)、可擦除可编程只读存储器(ErasablePROM，EPROM)、电可擦除可编程只读存储器(ElectricallyEPROM，EEPROM)或闪存。易失性存储器可以是随机存取存储器(RandomAccessMemory，RAM)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器(StaticRAM，SRAM)、动态随机存取存储器(DynamicRAM，DRAM)、同步动态随机存取存储器(SynchronousDRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(DoubleDataRateSDRAM，DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(SynchlinkDRAM，SLDRAM)和直接内存总线随机存取存储器(DirectRambusRAM，DRRAM)。本发明实施例描述的系统和方法的存储器502旨在包括但不限于这些和任意其它适合类型的存储器。

在一些实施方式中，存储器502存储了如下的元素，可执行模块或者数据结构，或者他们的子集，或者他们的扩展集；操作系统5021和应用程序5022。

其中，操作系统5021，包含各种系统程序，例如框架层、核心库层、驱动层等，用于实现各种基础业务以及处理基于硬件的任务。应用程序5022，包含各种应用程序，例如媒体播放器(MediaPlayer)、浏览器(Browser)等，用于实现各种应用业务。实现本发明实施例方法的程序可以包含在应用程序5022中。

在本发明实施例中，通过调用存储器502存储的程序或指令，具体的，可以是应用程序5022中存储的程序或指令，处理器501用于获取物体的深度信息；根据物体的深度信息和尺寸信息，建立物体的物体模型；建立包括参照物模型和物体模型的虚拟场景；显示虚拟场景。

上述本发明实施例揭示的方法可以应用于处理器501中，或者由处理器501实现。处理器501可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器501中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器501可以是通用处理器、数字信号处理器(DigitalSignalProcessor，DSP)、专用集成电路(ApplicationSpecificIntegratedCircuit，ASIC)、现成可编程门阵列(FieldProgrammableGateArray，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器502，处理器501读取存储器502中的信息，结合其硬件完成上述方法的步骤。

可以理解的是，本发明实施例描述的这些实施例可以用硬件、软件、固件、中间件、微码或其组合来实现。对于硬件实现，处理单元可以实现在一个或多个专用集成电路(ApplicationSpecificIntegratedCircuits，ASIC)、数字信号处理器(DigitalSignalProcessing，DSP)、数字信号处理设备(DSPDevice，DSPD)、可编程逻辑设备(ProgrammableLogicDevice，PLD)、现场可编程门阵列(Field-ProgrammableGateArray，FPGA)、通用处理器、控制器、微控制器、微处理器、用于执行本申请所述功能的其它电子单元或其组合中。

对于软件实现，可通过执行本发明实施例所述功能的模块(例如过程、函数等)来实现本发明实施例所述的技术。软件代码可存储在存储器中并通过处理器执行。存储器可以在处理器中或在处理器外部实现。

移动终端500能够实现前述实施例中移动终端实现的各个过程，为避免重复，这里不再赘述。

本发明实施例中，移动终端500可以获取物体的深度信息；根据目标物体的深度信息和尺寸信息，建立目标物体的物体模型；建立包括目标参照物模型和目标物体模型的虚拟场景；显示虚拟场景，本发明利用物体的深度信息建立包括目标物体模型和目标参照物模型的虚拟场景，并在移动终端进行展示，使得在该场景中用户可以通过参照物模型与物体模型的直观视觉对比，实现对物体大小的感知和判断，且根据物体的深度信息和尺寸信息建立的物体模型的尺寸精确度更高，提高了对展示物体大小的描述精确度。

图13是本发明另一个实施例的移动终端的结构示意图。

所述移动终端包括；处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现上述的物体信息显示方法的步骤。

所述移动终端还包括：可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现上述的物体信息显示方法的步骤。

具体地，图13中的移动终端600可以为手机、平板电脑、个人数字助理(PersonalDigital Assistant，PDA)、或车载电脑等。

图13中的移动终端600包括射频(RadioFrequency，RF)电路610、存储器620、输入单元630、显示单元640、处理器660、音频电路670、无线局域网(WirelessFidelity)模块680、电源690和摄像头6110。

其中，输入单元630可用于接收用户输入的数字或字符信息，以及产生与移动终端600的用户设置以及功能控制有关的信号输入。具体地，本发明实施例中，该输入单元630可以包括触控面板631。触控面板631，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板631上的操作)，并根据预先设定的程式驱动相应的连接装置。可选的，触控面板631可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给该处理器660，并能接收处理器660发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板631。除了触控面板631，输入单元630还可以包括其他输入设备632，其他输入设备632可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。

其中，显示单元640可用于显示由用户输入的信息或提供给用户的信息以及移动终端600的各种菜单界面。显示单元640可包括显示面板641，可选的，可以采用LCD或有机发光二极管(OrganicLight-EmittingDiode，OLED)等形式来配置显示面板641。

应注意，触控面板631可以覆盖显示面板641，形成触摸显示屏，当该触摸显示屏检测到在其上或附近的触摸操作后，传送给处理器660以确定触摸事件的类型，随后处理器660根据触摸事件的类型在触摸显示屏上提供相应的视觉输出。

触摸显示屏包括应用程序界面显示区及常用控件显示区。该应用程序界面显示区及该常用控件显示区的排列方式并不限定，可以为上下排列、左右排列等可以区分两个显示区的排列方式。该应用程序界面显示区可以用于显示应用程序的界面。每一个界面可以包含至少一个应用程序的图标和/或widget桌面控件等界面元素。该应用程序界面显示区也可以为不包含任何内容的空界面。该常用控件显示区用于显示使用率较高的控件，例如，设置按钮、界面编号、滚动条、电话本图标等应用程序图标等。

其中处理器660是移动终端600的控制中心，利用各种接口和线路连接整个手机的各个部分，通过运行或执行存储在第一存储器621内的软件程序和/或模块，以及调用存储在第二存储器622内的数据，执行移动终端600的各种功能和处理数据，从而对移动终端600进行整体监控。可选的，处理器660可包括一个或多个处理单元。

在本发明实施例中，通过调用存储该第一存储器621内的软件程序和/或模块和/或该第二存储器622内的数据，处理器660用于获取物体的深度信息；根据目标物体的深度信息和尺寸信息，建立目标物体的物体模型；建立包括目标参照物模型和目标物体模型的虚拟场景；显示虚拟场景。

可见，本发明实施例中，移动终端可以包括：获取物体的深度信息；根据目标物体的深度信息和尺寸信息，建立目标物体的物体模型；建立包括目标参照物模型和目标物体模型的虚拟场景；显示虚拟场景，本发明利用物体的深度信息建立包括目标物体模型和目标参照物模型的虚拟场景，并在移动终端进行展示，使得在该场景中用户可以通过参照物模型与物体模型的直观视觉对比，实现对物体大小的感知和判断，且根据物体的深度信息和尺寸信息建立的物体模型的尺寸精确度更高，提高了对展示物体大小的描述精确度。

对于上述装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。

本领域技术人员易于想到的是；上述各个实施例的任意组合应用都是可行的，故上述各个实施例之间的任意组合都是本发明的实施方案，但是由于篇幅限制，本说明书在此就不一一详述了。

在此提供的物体信息显示方法不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与基于在此的示教一起使用。根据上面的描述，构造具有本发明方案的系统所要求的结构是显而易见的。此外，本发明也不针对任何特定编程语言。应当明白，可以利用各种编程语言实现在此描述的本发明的内容，并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。

在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。

类似地，应当理解，为了精简本发明并帮助理解各个发明方面中的一个或多个，在上面对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该公开的方法解释成反映如下意图；即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说，如权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明的单独实施例。

本领域那些技术人员可以理解，可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件，以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。

此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。

本发明的各个部件实施例可以以硬件实现，或者以在一个或者多个处理器上运行的软件模块实现，或者以它们的组合实现。本领域的技术人员应当理解，可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的视频中背景音乐的识别方法中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如，计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上，或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到，或者在载体信号上提供，或者以任何其他形式提供。

应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制，并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。

Claims (12)

1.一种物体信息显示方法，应用于终端，其特征在于，所述方法包括：

获取目标物体的深度信息和尺寸信息；

根据所述目标物体的深度信息和尺寸信息，建立所述目标物体的目标物体模型；

建立包括目标参照物模型和所述目标物体模型的虚拟场景；

显示所述虚拟场景。

2.根据权利要求1所述的方法，其特征在于，所述建立包括目标参照物模型和所述目标物体模型的虚拟场景，包括：

将距离所述移动终端最近的物体确定为目标参照物；

获取所述目标参照物的深度信息和尺寸信息；

根据所述目标参照物的深度信息和尺寸信息，建立所述目标参照物的目标参照物模型；

基于所述目标参照物模型和所述目标物体模型，建立虚拟场景。

3.根据权利要求1所述的方法，其特征在于，所述建立包括目标参照物模型和所述目标物体模型的虚拟场景，包括：

接收用户的输入；

将所述输入所选取的参照物模型确定为目标参照物模型；

基于所述目标参照物模型和所述目标物体模型，建立虚拟场景。

4.根据权利要求1所述的方法，其特征在于，所述显示所述虚拟场景，包括：

在所述目标物体模型和所述目标参照物模型包括至少一个棱角的情况下，确定所述目标物体模型的第一棱角点和所述目标参照物模型的第二棱角点，所述第二棱角点为距离所述移动终端最近的棱角点；

在所述虚拟场景中，移动所述目标物体模型或所述目标参照物模型，以使所述目标物体模型的第一棱角点和所述目标参照物模型的第二棱角点重合。

5.根据权利要求1所述的方法，其特征在于，所述显示所述虚拟场景，包括：

在所述目标物体模型和所述目标参照物模型包括至少一个侧边的情况下，确定所述目标物体模型的第一侧边和所述目标参照物模型的第二侧边，所述第二侧边为距离所述移动终端最近的侧边；

在所述虚拟场景中，移动所述目标物体模型或所述目标参照物模型，以使所述目标物体模型的第一侧边和所述目标参照物模型的第二侧边重合。

6.根据权利要求1所述的方法，其特征在于，所述显示所述虚拟场景，包括：

在所述虚拟场景中，移动所述目标物体模型或所述目标参照物模型，以使所述目标物体模型的第一质心和所述目标参照物模型的第二质心重合。

7.根据权利要求1所述的方法，其特征在于，所述移动终端包括：飞行时间模组；

所述获取目标物体的深度信息，包括：

通过所述飞行时间模组的发射端，向所述目标物体发射第一光脉冲信号，并记录所述第一光脉冲信号由所述发射端到达所述目标物体所花费的第一时间；

通过所述飞行时间模组的接收端，接收由所述目标物体反射回的第二光脉冲信号，并记录所述第二光脉冲信号由所述目标物体反射至所述接收端所花费的第二时间；

根据所述第一时间和所述第二时间，计算得到所述目标物体的深度信息。

8.根据权利要求1所述的方法，其特征在于，所述移动终端包括：双目摄像模组，所述双目摄像模组包括第一摄像头和第二摄像头；

所述获取目标物体的深度信息，包括：

获取由所述第一摄像头对所述目标物体拍摄得到的第一图像；

获取由所述第人摄像头对所述目标物体拍摄得到的第二图像；

将所述第一图像与所述第二图像进行双目匹配处理，得到视差值；

根据所述双目摄像模组的焦距、所述第一摄像头和所述第二摄像头的光心间距和所述视差值，计算得到所述目标物体的深度信息。

9.一种移动终端，其特征在于，所述移动终端包括：

获取模块，用于获取目标物体的深度信息；

第一建立模块，用于根据所述目标物体的深度信息和尺寸信息，建立所述目标物体的物体模型；

第二建立模块，用于建立包括目标参照物模型和所述目标物体模型的虚拟场景；

展示模块，用于显示所述虚拟场景。

10.根据权利要求9所述的移动终端，其特征在于，所述第二建立模块包括：

第一确定子模块，用于将距离所述移动终端最近的物体确定为目标参照物；

第三获取子模块，用于获取所述目标参照物的深度信息和尺寸信息；

建立子模块，用于根据所述目标参照物的深度信息和尺寸信息，建立所述目标参照物的目标参照物模型；

添加子模块，用于基于所述目标参照物模型和所述目标物体模型，建立虚拟场景。

11.一种移动终端，其特征在于，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1至8中任一项所述的物体信息显示方法的步骤。

12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至8中任一项所述的物体信息显示方法的步骤。