CN111932606A - 物体边界尺寸检测方法、装置、头戴显示设备及存储介质 - Google Patents

物体边界尺寸检测方法、装置、头戴显示设备及存储介质 Download PDF

Info

Publication number
CN111932606A
CN111932606A CN202011082024.8A CN202011082024A CN111932606A CN 111932606 A CN111932606 A CN 111932606A CN 202011082024 A CN202011082024 A CN 202011082024A CN 111932606 A CN111932606 A CN 111932606A
Authority
CN
China
Prior art keywords
boundary
display
length
head
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011082024.8A
Other languages
English (en)
Inventor
梁宝超
姜滨
迟小羽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Goertek Optical Technology Co Ltd
Original Assignee
Goertek Optical Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Goertek Optical Technology Co Ltd filed Critical Goertek Optical Technology Co Ltd
Priority to CN202011082024.8A priority Critical patent/CN111932606A/zh
Publication of CN111932606A publication Critical patent/CN111932606A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/60—Analysis of geometric attributes
    • G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B2027/0178—Eyeglass type

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Optics & Photonics (AREA)
  • Geometry (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请公开了一种物体边界尺寸的检测方法、装置、头戴显示设备及计算机可读存储介质，该方法包括：头戴显示设备获取待测物体的边界尺寸检测指令；根据边界尺寸检测指令，获取距离传感器采集的距离值和显示部件显示的待测物体的边界显示长度；其中，距离传感器和显示部件均设置在头戴显示设备中；根据距离值和边界显示长度，确定待测物体的边界实际长度；本申请通过根据距离传感器采集的距离值和显示部件显示的待测物体的边界显示长度，确定待测物体的边界实际长度，使头戴显示设备可以测量到的物体的实际二维模型的边界尺寸，从而使用户在使用头戴显示设备的过程中便捷且快速的测量物体的边界尺寸，提升了头戴显示设备的功能性和用户体验。

Description

物体边界尺寸检测方法、装置、头戴显示设备及存储介质
技术领域
本申请涉及头戴显示设备领域，特别涉及一种物体边界尺寸检测方法、装置、头戴显示设备及计算机可读存储介质。
背景技术
在装修和居家生活中，我们有许多场景需要根据测量物体的边界尺寸。现有技术中，要测量物体的边界尺寸（如长和宽），传统的方法是用户利用如米尺的测量工具进行手动测量；而随着VR（Virtual Reality，虚拟现实）设备、AR（Augmented Reality，增强现实）设备和MR（Mediated Reality，混合现实）设备等头戴显示设备（如智能眼镜）的广泛使用，如何能够利用头戴显示设备便捷且快速的测量物体的边界尺寸，提升头戴显示设备的功能性和用户体验，是现今亟需解决的问题。
发明内容
本申请的目的是提供一种物体边界尺寸检测方法、装置、头戴显示设备及计算机可读存储介质，以利用头戴显示设备便捷且快速的测量物体的边界尺寸，提升头戴显示设备的功能性和用户体验。
为解决上述技术问题，本申请提供一种物体边界尺寸检测方法，包括：
头戴显示设备获取待测物体的边界尺寸检测指令；
根据所述边界尺寸检测指令，获取距离传感器采集的距离值和显示部件显示的所述待测物体的边界显示长度；其中，所述距离传感器和所述显示部件均设置在所述头戴显示设备中；
根据所述距离值和所述边界显示长度，确定所述待测物体的边界实际长度。
可选的，所述边界显示长度包括垂直投影长度时，所述根据所述距离值和所述边界显示长度，确定所述待测物体的边界实际长度，包括：
根据所述距离值，确定所述待测物体对应的所述显示部件的垂直测量极限值；
根据目标垂直投影长度与所述显示部件的垂直显示规格长度之比和所述垂直测量极限值，确定所述目标垂直投影长度对应的边界实际长度；其中，所述目标垂直投影长度为任一所述垂直投影长度。
可选的，所述根据所述距离值，确定所述待测物体对应的所述显示部件的垂直测量极限值，包括
根据所述距离值和所述显示部件的所述垂直显示规格长度、上垂直视角以及下垂直视角，通过H= h1 + h2 + h3，确定所述垂直测量极限值；其中，h2= L * tan(θ1 – 90°)，h3=L * tan(θ2 – 90°)，L为所述距离值，h1为所述垂直显示规格长度，θ1为所述上垂直视角，θ2为所述下垂直视角。
可选的，该方法还包括：
根据陀螺仪采集的传感器数据，生成并在所述显示部件中显示二维坐标系；其中，所述二维坐标系包括相对于大地的水平线和垂直于大地的垂直线，所述陀螺仪设置在所述头戴显示设备中。
可选的，所述根据陀螺仪采集的传感器数据，生成并在所述显示部件中显示二维坐标系，包括：
根据获取的物体定位指令，在所述显示部件中的预设位置显示所述二维坐标系。
可选的，所述根据获取的物体定位指令，在所述显示部件中的预设位置显示所述二维坐标系，包括：
根据所述物体定位指令中的吊脚线信息，在所述二维坐标系中生成所述吊脚线信息对应的吊角线；
在所述显示部件中的所述预设位置显示包括所述吊角线的所述二维坐标系。
可选的，所述根据获取的物体定位指令，在所述显示部件中的预设位置显示所述二维坐标系之后，还包括：
根据获取的位置调整指令，调整所述显示部件中所述二维坐标系的显示位置。
本申请还提供了一种物体边界尺寸的检测装置，包括：
指令获取模块，用于获取待测物体的边界尺寸检测指令；
检测获取模块，用于根据所述边界尺寸检测指令，获取距离传感器采集的距离值和显示部件显示的所述待测物体的边界显示长度；其中，所述距离传感器和所述显示部件均设置在头戴显示设备中；
确定模块，用于根据所述距离值和所述边界显示长度，确定所述待测物体的边界实际长度。
本申请还提供了一种头戴显示设备，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如上述所述的物体边界尺寸的检测方法的步骤。
此外，本申请还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上述所述的物体边界尺寸的检测方法的步骤。
本申请所提供的一种物体边界尺寸的检测方法，包括：头戴显示设备获取待测物体的边界尺寸检测指令；根据边界尺寸检测指令，获取距离传感器采集的距离值和显示部件显示的待测物体的边界显示长度；其中，距离传感器和显示部件均设置在头戴显示设备中；根据距离值和边界显示长度，确定待测物体的边界实际长度；
可见，本申请通过根据距离传感器采集的距离值和显示部件显示的待测物体的边界显示长度，确定待测物体的边界实际长度，使头戴显示设备可以测量采集到的物体的实际二维模型的边界尺寸，从而使用户在使用头戴显示设备的过程中便捷且快速的测量物体的边界尺寸，提升了头戴显示设备的功能性和用户体验。此外，本申请还提供了一种物体边界尺寸的检测装置、头戴显示设备及计算机可读存储介质，同样具有上述有益效果。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本申请实施例所提供的一种物体边界尺寸的检测方法的流程图；
图2为本申请实施例所提供的一种头戴显示设备的垂直测量极限的示意图；
图3为本申请实施例所提供的一种头戴显示设备的垂直投影长度检测的示意图；
图4为本申请实施例所提供的一种坐标系的显示方法的流程图；
图5为本申请实施例所提供的一种头戴显示设备相对于大地的偏移角的示意图；
图6为本申请实施例所提供的一种头戴显示设备的二维坐标系显示的示意图；
图7为本申请实施例所提供的另一种头戴显示设备的二维坐标系显示的示意图；
图8为本申请实施例所提供的一种二维坐标系的显示位置的示意图；
图9为本申请实施例所提供的另一种二维坐标系的显示位置的示意图；
图10为本申请实施例所提供的一种物体边界尺寸的检测装置的结构框图；
图11为本申请实施例所提供的一种头戴显示设备的结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
请参考图1，图1为本申请实施例所提供的一种物体边界尺寸的检测方法的流程图，该方法可以包括：
步骤101：头戴显示设备获取待测物体的边界尺寸检测指令。
其中，本实施例中的头戴显示设备可以具体为能够实现增强现实（AR）和/或混合现实（MR）等效果的头戴式设备；头戴显示设备也可以具体为具备see through（看穿）功能的头戴式VR（虚拟现实）设备，使用户佩戴头戴式VR设备时能够透过头戴式VR设备看到外界实际物体。本步骤中的待测物体可以为需要检测边界尺寸的物体。本步骤中的边界尺寸检测指令可以为控制头戴显示设备检测待测物体的边界尺寸的指令。
具体的，对于本步骤中头戴显示设备中的处理器获取待测物体的边界尺寸检测指令的具体方式，可以由设计人员根据实用场景和用户需求自行设置，如头戴显示设备的处理器可以根据头戴显示设备中的人机交互设备（如触控板、物理按键、麦克风和/或摄像头等）采集的控制命令，生成待测物体的边界尺寸检测指令；例如头戴显示设备的处理器可以根据头戴显示设备中麦克风采集的语音控制命令，生成待测物体的边界尺寸检测指令；头戴显示设备的处理器也可以根据头戴显示设备中单独设置或与其他功能复用的物理按键的按动信号，生成待测物体的边界尺寸检测指令；头戴显示设备的处理器还可以根据头戴显示设备中触控板中的触摸键的触摸信号（如触摸达到时间阈值或一定时间内的预设次数触摸），生成待测物体的边界尺寸检测指令；头戴显示设备的处理器还可以根据在头戴显示设备中摄像头采集的图像中检测到的图像控制指令（如预设手势指令），生成待测物体的边界尺寸检测指令。头戴显示设备的处理器也可以直接与头戴显示设备连接的终端（如智能手机）发送的待测物体的边界尺寸检测指令，例如用户可以操作与头戴显示设备连接（如蓝牙连接）的智能手机，向头戴显示设备的处理器发送待测物体的边界尺寸检测指令。
步骤102：根据边界尺寸检测指令，获取距离传感器采集的距离值和显示部件显示的待测物体的边界显示长度；其中，距离传感器和显示部件均设置在头戴显示设备中。
其中，本步骤中的距离传感器可以为头戴显示设备中设置的用于检测头戴显示设备与待测物体之间距离的传感器；本实施例并不限定距离传感器的具体类型，距离传感器可以为红外距离传感器，也可以为光学距离传感器，还可以超声波距离传感器，只要用户佩戴头戴显示设备时，头戴显示设备上的距离传感器可以采集与外部物体（如待测物体）之间的距离，本实施例对此不作任何限制。
具体的，本步骤中的边界显示长度可以为头戴显示设备中的显示部件（如显示屏）的显示内容中显示的待测物体的二维模型的边界线的长度（即边界显示长度），如显示部件显示的待测物体的二维模型的长对应的边界线（即垂直投影线）的长度（即垂直投影长度），以及显示部件显示的待测物体的二维模型的宽对应的边界线（即水平投影线）的长度（即水平投影长度）。
对应的，本步骤还可以包括处理器根据边界尺寸检测指令中的待测物体信息，识别显示部件显示的待测物体，并检测显示的待测物体的边界显示长度的步骤。具体的，头戴显示设备中的处理器可以采用与现有技术中的图像识别和检测方法相同或相似的方式实现对显示部件显示的待测物体的识别和待测物体的边界显示长度的检测，本实施例对此不作任何限制。
需要说明的是，由于如智能眼镜的头戴显示设备的是有设计规格的，而在头戴显示设备的显示部件上显示的物体大小是受限的（与人眼原理相同），如果物体太大或者头戴显示设备离物体太近，那显示部件上只能显示物体的一部分，用户可以增加头戴显示设备与物体的距离，让物体全部显示在智能眼镜上。因此，本步骤中处理器获取的显示部件显示的待测物体的每个边界显示长度对应的垂直长度和水平长度可以分别小于显示部件的垂直显示规格长度和水平显示规格长度，以保证待测物体的检测面可以全部显示在显示部件中。相应的，处理器在检测到任一边界显示长度对应的垂直长度达到垂直显示规格长度或对应的水平长度达到水平显示规格长度时，可以输出检测提示信息，以提示用户与待测物体距离太近，无法检测待测物体完整的边界尺寸。
可以理解的是，本步骤的目的可以为头戴显示设备中的处理器在获取边界尺寸检测指令后，启动距离传感器以获取距离传感器采集的距离值，并检测显示部件的显示内容中待测物体的二维模型的边界线的长度（即边界显示长度）。
具体的，本步骤中处理器可以默认获取的距离传感器采集的距离值为头戴显示设备与待测物体的检测面（即二维模型）的垂直距离，即处理器获取边界尺寸检测指令时，用户佩戴的头戴显示设备中的距离传感器可以采集头戴显示设备与待测物体的检测面之间的垂直距离对应的数据；例如在距离传感器启动之前处理器可以根据头戴显示设备中的陀螺仪采集的传感器数据，生成并在显示部件中显示二维坐标系，以使用户可以利用显示的二维坐标系的横纵坐标使距离传感器采集距离值为头戴显示设备与待测物体的检测面的垂直距离，即二维坐标系所在平面与待测物体的检测面平行；其中，该二维坐标系可以包括相对于大地的水平线和垂直于大地的垂直线。
相应的，距离传感器为红外距离传感器时，在距离传感器启动之前可以在显示部件显示距离传感器采集距离值的位置（如显示一个红点），以使用户在佩戴头戴显示设备时能够保证采集到的距离值为头戴显示设备与待测物体之间的距离。
步骤103：根据距离值和边界显示长度，确定待测物体的边界实际长度。
可以理解的是，本步骤的目的可以为头戴显示设备中的处理器利用获取的距离值和边界显示长度，确定待测物体实际的边界线的长度（即边界实际长度）。
具体的，对于本步骤中处理器根据距离值和边界显示长度，确定待测物体的边界实际长度的具体方式，可以由设计人员根据实用场景和用户需求自行设置，如处理器可以根据获取的距离传感器采集的距离值，确定显示部件能够显示的待测物体的检测面对应的测量极限（如垂直测量极限值和水平测量极限值），即显示部件能够显示的该检测面的极限，例如显示部件为矩形显示器（如智能眼镜的矩形镜片）时，处理器可以根据获取的距离传感器采集的距离值，确定待测物体对应的显示部件的垂直测量极限值和水平测量极限值，即显示部件的垂直显示规格长度（如图2中的h1）对应的垂直测量极限值（如图2中的h1、h2和 h3之和）和水平显示规格长度对应的水平测量极限值；从而利用测量极限与显示部件的显示规格之比和获取的边界显示长度，确定待测物体在实际的检测面中的边界长度（即边界实际长度）。
例如，显示部件为矩形显示器时，处理器获取的边界显示长度包括垂直投影长度时，即检测到的边界线包括在显示部件中垂直显示的边界线时，处理器可以根据距离值，确定待测物体对应的显示部件的垂直测量极限值；根据目标垂直投影长度（如图3中的h4）与显示部件的垂直显示规格长度（如图3中的h1）之比和垂直测量极限值（如图3中的H），确定目标垂直投影长度对应的边界实际长度；其中，目标垂直投影长度为任一垂直投影长度；如图3所示，目标垂直投影长度对应的边界实际长度可以为H * （h4/h1）。
相应的，处理器获取的边界显示长度包括水平投影长度时，即检测到的边界线包括在显示部件中水平显示的边界线时，处理器可以根据距离值，确定待测物体对应的显示部件的水平测量极限值；根据目标水平投影长度与显示部件的水平显示规格长度之比和水平测量极限值，确定目标水平投影长度对应的边界实际长度；其中，目标水平投影长度为任一水平投影长度
具体的，对于上述处理器根据距离值，确定待测物体对应的显示部件的垂直测量极限值的具体方式，可以由设计人员自行设置，如默认距离值为头戴显示设备与待测物体的检测面的垂直距离时，处理器可以根据预先设置的距离值与垂直测量极限值的对应关系，匹配获取的距离值对应的垂直测量极限值，例如设计人员可以预先设置包含有每个距离值和各自对应的垂直测量极限值的数据表；处理器也可以根据距离值和显示部件的垂直显示规格长度（如图2中的h1）、上垂直视角（如图2中的θ1）以及下垂直视角（如图2中的θ2），通过H=h1 + h2 + h3，确定垂直测量极限值；其中，h2= L * tan(θ1 – 90°)，h3= L * tan(θ2 –90°)，L为距离值，h1为垂直显示规格长度，θ1为上垂直视角，θ2为下垂直视角。相应的，默认距离值为头戴显示设备与待测物体的检测面的垂直距离时，处理器可以根据距离值和显示部件的水平显示规格长度、左水平视角以及右水平视角，通过H= h5 + h6 + h7，确定水平测量极限值；其中，L为距离值，h6= L * tan(θ3 – 90°)，h7= L * tan(θ4 – 90°)，h5为水平显示规格长度，θ3为左水平视角，θ4为右水平视角。
需要说明的是，对于处理器获取的边界显示长度中不为水平投影长度或垂直投影长度的特殊边界显示长度，即检测到的边界线包括不在显示部件中水平显示或垂直显示的特殊边界线时，处理器可以采用上述计算过程分别计算每个特殊边界显示长度对应的水平实际长度（b）和垂直实际长度（c），即特殊边界线投影到显示部件中水平显示的边界线的显示长度对应的实际长度（即水平实际长度）和投影到显示部件中垂直显示的边界线的显示长度对应的实际长度（即垂直实际长度），通过三角公式得出特殊边界显示长度对应的边界实际长度（a），即a2= b2+c2。
具体的，本步骤之后还可以包括头戴显示设备的处理器输出确定的待测物体的边界实际长度的步骤，如处理器可以在显示部件中显示待测物体的边界实际长度，例如处理器可以在显示部件中以列表的形式显示待测物体的边界实际长度，处理器也可以在显示部件中待测物体的各边界线之上或附近显示各自对应的边界实际长度；处理器也可以通过扬声器语音输出待测物体的边界实际长度。只要处理器可以通过输出确定的待测物体的边界实际长度，使佩戴头戴显示设备的用户了解测量出的待测物体的边界实际长度，本实施例并不限定边界实际长度的具体输出方式。
本实施例中，本申请实施例通过根据距离传感器采集的距离值和显示部件显示的待测物体的边界显示长度，确定待测物体的边界实际长度，使头戴显示设备可以测量采集到的物体的实际二维模型的边界尺寸，从而使用户在使用头戴显示设备的过程中便捷且快速的测量物体的边界尺寸，提升了头戴显示设备的功能性和用户体验。
基于上述实施例，为了使用户能够便捷地利用头戴显示设备中的距离传感器采集头戴显示设备与待测物体的检测面的垂直距离，方便用户安放物体，本实施例中头戴显示设备可以建立并显示基于大地水平的坐标系。具体的，请参考图4，图4为本申请实施例所提供的一种坐标系的显示方法的流程图。该方法可以包括：
步骤201：头戴显示设备在获取物体定位指令后，根据陀螺仪采集的传感器数据，生成二维坐标系；其中，二维坐标系包括相对于大地的水平线和垂直于大地的垂直线，陀螺仪设置在头戴显示设备中。
具体的，本步骤的目的可以为头戴显示设备的处理器利用头戴显示设备中的陀螺仪采集的传感器数据，建立基于大地水平的坐标系（即二维坐标系）。由于陀螺仪可以计算出当前头戴显示设备（如图5中的智能眼镜）相对于大地的偏移角（如图5中的50°），如图6所示，虽然头戴显示设备本身是相对于水平面倾斜的，但是根据陀螺仪获取的偏移角，可以在头戴显示设备中建立包括相对于大地的水平线（X轴）和垂直于大地的垂直线（Y轴）的二维坐标系。
对应的，由于用户佩戴头戴显示设备时，头部难免会有所偏移。本步骤中头戴显示设备可以按预设时间间隔（如实时），根据陀螺仪采集的传感器数据，生成二维坐标系，以保证建立并在显示部件中显示的二维坐标系可以根据陀螺仪实时输出的角度进行动态调整，确保与大地保持水平。如图6和图7所示，在头戴显示设备相对于大地的偏移角由50°偏移到30°时，头戴显示设备内建立的二维坐标系会根据陀螺仪得到的角度变化，动态的调整二维坐标系，保持与大地的水平。
可以理解的是，本步骤中的物体定位指令可以为控制头戴显示设备生成并在显示部件中显示二维坐标系的指令。对于本步骤中的物体定位指令的具体获取方式，可以由设计人员根据实用场景和用户需求自行设置，如头戴显示设备的处理器可以根据头戴显示设备中的人机交互设备（如触控板或麦克风）采集的控制命令，生成物体定位指令；例如用户需要安放物体或检测物体边界尺寸时，可以通过向麦克风发出语音控制命令或操作触控板，控制头戴显示设备的处理器生成物体定位指令。头戴显示设备的处理器也可以直接与头戴显示设备连接的终端（如智能手机）发送的物体定位指令，例如用户可以操作与头戴显示设备连接（如蓝牙连接）的智能手机，向头戴显示设备的处理器发送物体定位指令。头戴显示设备的处理器还可以在上一实施例中获取距离传感器采集的距离值和显示部件显示的待测物体的边界显示长度之前，生成物体定位指令，以在显示部件中显示二维坐标系，便于用户调整头戴显示设备与待测物体的相对位置，保证待测物体的边界实际长度的检测的准确性。
对应的，本实施例是以处理器根据获取的物体定位指令，生成并在显示部件中显示二维坐标系为例进行的展示，相应的，基于上一实施例，处理器也可以在获取边界尺寸检测指令后，直接生成并在显示部件中显示二维坐标系，之后再获取距离传感器采集的距离值和显示部件显示的待测物体的边界显示长度。本实施例对此不作任何限制。
需要说明的是，为了进一步方便用户安放物品，本步骤中生成的二维坐标系还可以包括物体定位指令中的吊脚线信息对应的吊角线，如吊脚线信息可以为每个吊角线与二维坐标系中的水平线或垂直线之间的夹角值（如图6中的θ），如图6所示，用户需要显示的二维坐标系中有一条与水平呈θ角的吊角线α时，可以通过输入θ角，使头戴显示设备在二维坐标系中形成一条新的吊角线α（即参照线）；同样的，用户输入多个不同的θ角时，头戴显示设备在二维坐标系中形成每个θ角对应的吊角线。
步骤202：在显示部件中的预设位置显示二维坐标系。
可以理解的是，本步骤的目的可以处理器通过在头戴显示设备的显示部件中的预设位置显示二维坐标系，使用户在佩戴头戴显示设备时，能够查看到二维坐标系，从而辅助用户安放物体或调整与待测物体之间的相对位置。
具体的，对于本步骤中的预设位置的具体设置，可以由设计人员根据实用场景和用户需求自行设置，如预设位置可以为显示部件中的一个固定的显示位置，如图8中显示部件的屏幕中部；预设位置也可以为处理器检测到的物体的对应位置，如图9中处理器检测到的显示部件中显示的物体的边界位置，即处理器可以将二维坐标系自动放置到检测到的显示部件中显示的物体（如上一实施例中的待测物体）的附近，提高用户体验。
需要说明的是，本实施例还可以包括根据获取的位置调整指令，调整显示部件中二维坐标系的显示位置的步骤，以使用户可以控制显示部件中二维坐标系的显示位置的移动，实现人不动而二维坐标系移动，更好地实现物品安放和空间测绘。如图8所示，如果二维坐标系显示在视野的中间位置，而物体在视野的右侧；此时物体远离二维坐标系，无法做到精确辅助定位；此时用户可以通过头戴显示设备集成的触控板、麦克风和/或摄像头等人机交互设备移动显示的二维坐标系，使物品的边界和二维坐标系重合，实现精确的辅助定位如图9。也就是说，处理器可以根据头戴显示设备中的触控板采集的触控命令、麦克风采集的语音控制命令和/或摄像头采集的图像，生成位置调整指令，从而对应调整显示部件中二维坐标系的显示位置。
例如，头戴显示设备的处理器可以根据头戴显示设备中的摄像头采集的图像，识别出位置调整手势（如仅食指指出的手势），并根据位置调整手势的预设位置（如食指指尖）生成位置调整指令，从而对应调整显示部件中二维坐标系的显示位置，如处理器可以将显示部件中二维坐标系的坐标原点调整显示到用户仅食指指出的手势的食指指尖位置，使得用户可以通过手势移动显示部件中二维坐标系至目标位置，从而使二维坐标系的坐标原点可以与测量或对标原点重合，或者通过手势拖动显示部件中的二维坐标系至任意目标点（非坐标原点），方便后续测量和根据虚拟的二维坐标系调整实际物体的摆放或者绘制。头戴显示设备的处理器可以根据头戴显示设备中的触控板采集的滑动触控命令，生成位置调整指令，使用户可以在触控板滑动调整显示部件中二维坐标系的显示位置；也就是说，显示部件中二维坐标系移动位置（即移动距离和方向）可以与触控板中用户的滑动距离和方向相对应。
具体的，本实施例并不限定显示部件中显示的二维坐标系的具体内容，如显示的二维坐标系可以为包括相对于大地的水平线（即X轴）和垂直于大地的垂直线（即Y轴），还可以包括物体定位指令中的吊脚线信息对应的吊角线。
本实施例中，本申请实施例通过在显示部件中的预设位置显示基于大地水平的二维坐标系，使头戴显示设备可以辅助用户更好地进行安放物体和空间测绘，避免了水平计、角度仪和米尺等常用测量工具的使用，进一步提升了头戴显示设备的功能性和用户体验。
请参考图10，图10为本申请实施例所提供的一种物体边界尺寸的检测装置的结构框图。该装置可以包括：
指令获取模块10，用于获取待测物体的边界尺寸检测指令；
检测获取模块20，用于根据边界尺寸检测指令，获取距离传感器采集的距离值和显示部件显示的待测物体的边界显示长度；其中，距离传感器和显示部件均设置在头戴显示设备中；
确定模块30，用于根据距离值和边界显示长度，确定待测物体的边界实际长度。
可选的，边界显示长度包括垂直投影长度时，确定模块30，可以包括：
垂直极限确定子模块，用于根据距离值，确定待测物体对应的显示部件的垂直测量极限值；
计算子模块，用于根据目标垂直投影长度与显示部件的垂直显示规格长度之比和垂直测量极限值，确定目标垂直投影长度对应的边界实际长度；其中，目标垂直投影长度为任一垂直投影长度。
可选的，垂直极限确定子模块可以具体用于根据距离值和显示部件的垂直显示规格长度、上垂直视角以及下垂直视角，通过H= h1 + h2 + h3，确定垂直测量极限值；其中，h2= L * tan(θ1 – 90°)，h3= L * tan(θ2 – 90°)，L为距离值，h1为垂直显示规格长度，θ1为上垂直视角，θ2为下垂直视角。
可选的，该装置还可以包括：
坐标系显示模块，用于根据陀螺仪采集的传感器数据，生成并在显示部件中显示二维坐标系；其中，二维坐标系包括相对于大地的水平线和垂直于大地的垂直线，陀螺仪设置在头戴显示设备中。
可选的，坐标系显示模块，可以包括：
显示子模块，用于根据获取的物体定位指令，在显示部件中的预设位置显示二维坐标系。
可选的，显示子模块，可以包括：
吊角线生成单元，用于根据物体定位指令中的吊脚线信息，在二维坐标系中生成吊脚线信息对应的吊角线；
吊角线显示单元，用于在显示部件中的预设位置显示包括吊角线的二维坐标系。
可选的，该装置还可以包括：
显示调整模块，用于根据获取的位置调整指令，调整显示部件中二维坐标系的显示位置。
本实施例中，本申请实施例通过确定模块30根据距离传感器采集的距离值和显示部件显示的待测物体的边界显示长度，确定待测物体的边界实际长度，使头戴显示设备可以测量采集到的物体的实际二维模型的边界尺寸，从而使用户在使用头戴显示设备的过程中便捷且快速的测量物体的边界尺寸，提升了头戴显示设备的功能性和用户体验。
请参考图11，图11为本申请实施例所提供的一种头戴显示设备的结构示意图。该头戴显示设备1可以包括：
存储器11，用于存储计算机程序；处理器12，用于执行该计算机程序时实现如上述实施例所提供的物体边界尺寸的检测方法的步骤。
头戴显示设备1可以具体为VR设备、AR设备或MR设备，头戴显示设备1可以包括存储器11、处理器12和总线13。
其中，存储器11至少包括一种类型的可读存储介质，该可读存储介质包括闪存、硬盘、多媒体卡、卡型存储器（例如，SD或DX存储器等）、磁性存储器、磁盘、光盘等。存储器11在一些实施例中可以是头戴显示设备1的内部存储单元。存储器11在另一些实施例中也可以是头戴显示设备1的外部存储设备，例如AR设备、VR设备或MR设备上配备的插接式硬盘，智能存储卡（Smart Media Card, SMC），安全数字（Secure Digital, SD）卡，闪存卡（FlashCard）等。进一步地，存储器11还可以既包括头戴显示设备1的内部存储单元也包括外部存储设备。存储器11不仅可以用于存储安装于头戴显示设备1的应用软件及各类数据，例如：执行物体边界尺寸的检测方法的程序的代码等，还可以用于暂时地存储已经输出或者将要输出的数据。
处理器12在一些实施例中可以是一中央处理器（Central Processing Unit,CPU）、控制器、微控制器、微处理器或其他数据处理芯片，用于运行存储器11中存储的程序代码或处理数据，例如执行物体边界尺寸的检测方法的程序的代码等。
该总线13可以是外设部件互连标准(peripheral component interconnect，简称PCI)总线或扩展工业标准结构(extended industry standard architecture，简称EISA)总线等。该总线可以分为地址总线、数据总线、控制总线等。为便于表示，图11中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
进一步地，头戴显示设备1还可以包括网络接口14，网络接口14可选的可以包括有线接口和/或无线接口（如WI-FI接口、蓝牙接口等），通常用于在该头戴显示设备1与其他电子设备之间建立通信连接。
可选地，该头戴显示设备1还可以包括用户接口15，用户接口15可以包括显示器（Display）、输入单元比如案件或触摸屏，可选的用户接口15还可以包括标准的有线接口、无线接口。可选地，在一些实施例中，显示器可以是LED显示器、液晶显示器、触控式液晶显示器以及OLED（Organic Light-Emitting Diode，有机发光二极管）触摸器等。其中，显示器也可以适当的称为显示屏或显示单元，用于显示在头戴显示设备1中处理的信息以及用于显示可视化的用户界面。
图11仅示出了具有组件11-15的头戴显示设备1，本领域技术人员可以理解的是，图11示出的结构并不构成对头戴显示设备1的限定，可以包括比图示更少或者更多的部件，或者组合某些部件，或者不同的部件布置。
此外，本申请实施例还公开了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现如上述实施例所提供的物体边界尺寸的检测方法的步骤。
其中，该存储介质可以包括：U盘、移动硬盘、只读存储器（Read-Only Memory ，ROM）、随机存取存储器（Random Access Memory ，RAM）、磁碟或者光盘等各种可以存储程序代码的介质。
说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置、头戴显示设备及计算机可读存储介质而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
以上对本申请所提供的一种物体边界尺寸的检测方法、装置、头戴显示设备及计算机可读存储介质进行了详细介绍。本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以对本申请进行若干改进和修饰，这些改进和修饰也落入本申请权利要求的保护范围内。

Claims (10)

1.一种物体边界尺寸检测方法，其特征在于，包括：
头戴显示设备获取待测物体的边界尺寸检测指令；
根据所述边界尺寸检测指令，获取距离传感器采集的距离值和显示部件显示的所述待测物体的边界显示长度；其中，所述距离传感器和所述显示部件均设置在所述头戴显示设备中；
根据所述距离值和所述边界显示长度，确定所述待测物体的边界实际长度。
2.根据权利要求1所述的物体边界尺寸检测方法，其特征在于，所述边界显示长度包括垂直投影长度时，所述根据所述距离值和所述边界显示长度，确定所述待测物体的边界实际长度，包括：
根据所述距离值，确定所述待测物体对应的所述显示部件的垂直测量极限值；
根据目标垂直投影长度与所述显示部件的垂直显示规格长度之比和所述垂直测量极限值，确定所述目标垂直投影长度对应的边界实际长度；其中，所述目标垂直投影长度为任一所述垂直投影长度。
3.根据权利要求2所述的物体边界尺寸检测方法，其特征在于，所述根据所述距离值，确定所述待测物体对应的所述显示部件的垂直测量极限值，包括：
根据所述距离值和所述显示部件的垂直显示规格长度、上垂直视角以及下垂直视角，通过H= h1 + h2 + h3，确定所述垂直测量极限值；其中，h2= L * tan(θ1 – 90°)，h3= L *tan(θ2 – 90°)，L为所述距离值，h1为所述垂直显示规格长度，θ1为所述上垂直视角，θ2为所述下垂直视角。
4.根据权利要求1至3任一项所述的物体边界尺寸检测方法，其特征在于，还包括：
根据陀螺仪采集的传感器数据，生成并在所述显示部件中显示二维坐标系；其中，所述二维坐标系包括相对于大地的水平线和垂直于大地的垂直线，所述陀螺仪设置在所述头戴显示设备中。
5.根据权利要求4所述的物体边界尺寸检测方法，其特征在于，所述根据陀螺仪采集的传感器数据，生成并在所述显示部件中显示二维坐标系，包括：
根据获取的物体定位指令，在所述显示部件中的预设位置显示所述二维坐标系。
6.根据权利要求5所述的物体边界尺寸检测方法，其特征在于，所述根据获取的物体定位指令，在所述显示部件中的预设位置显示所述二维坐标系，包括：
根据所述物体定位指令中的吊脚线信息，在所述二维坐标系中生成所述吊脚线信息对应的吊角线；
在所述显示部件中的所述预设位置显示包括所述吊角线的所述二维坐标系。
7.根据权利要求6所述的物体边界尺寸检测方法，其特征在于，所述根据获取的物体定位指令，在所述显示部件中的预设位置显示所述二维坐标系之后，还包括：
根据获取的位置调整指令，调整所述显示部件中所述二维坐标系的显示位置。
8.一种物体边界尺寸检测装置，其特征在于，包括：
指令获取模块，用于获取待测物体的边界尺寸检测指令；
检测获取模块，用于根据所述边界尺寸检测指令，获取距离传感器采集的距离值和显示部件显示的所述待测物体的边界显示长度；其中，所述距离传感器和所述显示部件均设置在头戴显示设备中；
确定模块，用于根据所述距离值和所述边界显示长度，确定所述待测物体的边界实际长度。
9.一种头戴显示设备，其特征在于，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如权利要求1至7任一项所述的物体边界尺寸的检测方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述的物体边界尺寸的检测方法的步骤。
CN202011082024.8A 2020-10-12 2020-10-12 物体边界尺寸检测方法、装置、头戴显示设备及存储介质 Pending CN111932606A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011082024.8A CN111932606A (zh) 2020-10-12 2020-10-12 物体边界尺寸检测方法、装置、头戴显示设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011082024.8A CN111932606A (zh) 2020-10-12 2020-10-12 物体边界尺寸检测方法、装置、头戴显示设备及存储介质

Publications (1)

Publication Number Publication Date
CN111932606A true CN111932606A (zh) 2020-11-13

Family

ID=73334722

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011082024.8A Pending CN111932606A (zh) 2020-10-12 2020-10-12 物体边界尺寸检测方法、装置、头戴显示设备及存储介质

Country Status (1)

Country Link
CN (1) CN111932606A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102564313A (zh) * 2010-12-31 2012-07-11 富泰华工业（深圳）有限公司 具有测量功能的电子装置及方法
CN106441092A (zh) * 2016-09-05 2017-02-22 合肥京东方光电科技有限公司 尺寸测量方法及移动终端
CN108463840A (zh) * 2016-01-18 2018-08-28 索尼公司 信息处理设备、信息处理方法以及记录介质
CN108603749A (zh) * 2016-02-02 2018-09-28 索尼公司 信息处理装置、信息处理方法和记录介质
CN108682031A (zh) * 2018-05-21 2018-10-19 深圳市酷开网络科技有限公司 基于增强现实技术的测量方法、智能终端及存储介质
US20200018971A1 (en) * 2017-04-03 2020-01-16 Microsoft Technology Licensing, Llc Mixed reality measurement with peripheral tool

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102564313A (zh) * 2010-12-31 2012-07-11 富泰华工业（深圳）有限公司 具有测量功能的电子装置及方法
CN108463840A (zh) * 2016-01-18 2018-08-28 索尼公司 信息处理设备、信息处理方法以及记录介质
CN108603749A (zh) * 2016-02-02 2018-09-28 索尼公司 信息处理装置、信息处理方法和记录介质
CN106441092A (zh) * 2016-09-05 2017-02-22 合肥京东方光电科技有限公司 尺寸测量方法及移动终端
US20200018971A1 (en) * 2017-04-03 2020-01-16 Microsoft Technology Licensing, Llc Mixed reality measurement with peripheral tool
CN108682031A (zh) * 2018-05-21 2018-10-19 深圳市酷开网络科技有限公司 基于增强现实技术的测量方法、智能终端及存储介质

Similar Documents

Publication Publication Date Title
US10095030B2 (en) Shape recognition device, shape recognition program, and shape recognition method
US10319104B2 (en) Method and system for determining datum plane
JP2016194799A (ja) 画像解析装置及び画像解析方法
US10234955B2 (en) Input recognition apparatus, input recognition method using maker location, and non-transitory computer-readable storage program
JP6344530B2 (ja) 入力装置、入力方法、及びプログラム
JP7275885B2 (ja) 表示装置、方向特定方法、プログラム
KR102665643B1 (ko) 아바타 표시를 제어하기 위한 방법 및 그 전자 장치
US10176556B2 (en) Display control apparatus, display control method, and non-transitory computer readable medium
US20150277570A1 (en) Providing Onscreen Visualizations of Gesture Movements
JP2012238293A (ja) 入力装置
US20180165853A1 (en) Head-mounted display apparatus and virtual object display system
US20220058887A1 (en) Augmented reality system and anchor display method thereof
KR20200101213A (ko) 전자 장치 및 전자 장치의 오브젝트 측정 방법
JP6632298B2 (ja) 情報処理装置、情報処理方法及びプログラム
CN111932606A (zh) 物体边界尺寸检测方法、装置、头戴显示设备及存储介质
JP6643825B2 (ja) 装置及び方法
US20240005619A1 (en) Augmented reality processing system, information display device, and augmented reality processing method
KR20150076574A (ko) 공간 터치 방법 및 공간 터치 장치
JP6373546B2 (ja) 情報処理装置、情報処理方法、及びプログラム
JP6342832B2 (ja) 入力装置
KR20150074878A (ko) 휴대 단말기의 이미지 프레임 내 피사체 간 거리 측정 방법
JP7287877B2 (ja) ３次元部品データ作成方法および該装置
EP3059664A1 (en) A method for controlling a device by gestures and a system for controlling a device by gestures
JP5950806B2 (ja) 入力装置、情報処理方法、及び情報処理プログラム
TWI566128B (zh) 虛擬觸控裝置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20201113