CN115471914A - 一种显示部件的调焦方法及装置 - Google Patents

一种显示部件的调焦方法及装置 Download PDF

Info

Publication number
CN115471914A
CN115471914A CN202211141072.9A CN202211141072A CN115471914A CN 115471914 A CN115471914 A CN 115471914A CN 202211141072 A CN202211141072 A CN 202211141072A CN 115471914 A CN115471914 A CN 115471914A
Authority
CN
China
Prior art keywords
focusing
action
media information
focal length
head
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211141072.9A
Other languages
English (en)
Inventor
童伟峰
朱延武
李庆庄
张亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bestechnic Shanghai Co Ltd
Original Assignee
Bestechnic Shanghai Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bestechnic Shanghai Co Ltd filed Critical Bestechnic Shanghai Co Ltd
Priority to CN202211141072.9A priority Critical patent/CN115471914A/zh
Publication of CN115471914A publication Critical patent/CN115471914A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B21/00Measuring arrangements or details thereof, where the measuring technique is not covered by the other groups of this subclass, unspecified or not relevant
    • G01B21/16Measuring arrangements or details thereof, where the measuring technique is not covered by the other groups of this subclass, unspecified or not relevant for measuring distance of clearance between spaced objects
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)

Abstract

本申请实施例提供了一种显示部件的调焦方法及装置,涉及计算机技术领域,该方法包括:通过媒体信息采集部件采集目标对象的媒体信息,并对媒体信息进行动作识别,获得动作识别结果。在确定动作识别结果与预设的针对显示部件的调焦启动动作匹配时,基于目标对象与头戴式显示设备之间的距离变化特征对显示部件进行调焦,以调整虚拟媒体信息的显示位置,故针对近视用户或远视用户来说,均能看到清晰的图像或视频,而不需要用户不断寻找佩戴在头部的头戴式显示设备的按钮实现调焦,从而提高调焦的效率。而且,本申请的调焦方式更加符合用户的使用习惯,更加直观且便利。

Description

一种显示部件的调焦方法及装置
技术领域
本申请实施例涉及计算机技术领域,尤其涉及一种显示部件的调焦方法及装置。
背景技术
随着科学技术的发展,增强现实(Augmented Reality,简称AR)眼镜/虚拟现实(Virtual Reality,简称VR)眼镜等智能眼镜市场渐渐兴起。AR眼镜/VR眼镜等头戴式显示设备(Head Mounted Display,简称HMD)可以通过显示屏向用户呈现图像,给用户以身临其境的沉浸式体验。
为了适应近视人群和远视人群等不同人群对智能眼镜的需求,相关智能眼镜支持用户通过手动调节智能眼镜上的旋转按钮,实现焦距调节,从而使得不同人群均能看到清晰图像。然而,在佩戴智能眼镜时,用户难以看到智能眼镜的旋转按钮,因此需要不断寻找旋转按钮才能实现焦距调节,从而导致焦距调节的效率较低,同时给用户带来不便。
发明内容
本申请实施例提供了一种显示部件的调焦方法及装置,用于提高对显示部件进行调焦的效率和便利性。
一方面,本申请实施例提供了一种显示部件的调焦方法,应用于头戴式显示设备,包括:
通过媒体信息采集部件采集目标对象的媒体信息,并对所述媒体信息进行动作识别,获得动作识别结果;
若所述动作识别结果与预设的针对显示部件的调焦启动动作匹配,则启动针对所述显示部件的调焦功能;
监测所述目标对象与所述头戴式显示设备之间的距离变化特征,并基于所述距离变化特征对所述显示部件进行调焦,以调整虚拟媒体信息的显示位置。
可选地,所述监测目标对象与所述显示部件之间的距离变化特征,包括:
通过与所述目标对象绑定的无线设备,以及与所述头戴式显示设备绑定的无线设备,监测所述目标对象与所述头戴式显示设备之间的间隔距离;
基于获得的多个间隔距离,确定所述目标对象与所述头戴式显示设备之间的距离变化特征。
可选地,还包括:
若所述动作识别结果与预设的针对显示部件的调焦关闭动作匹配,则关闭针对所述显示部件的调焦功能。
可选地,所述距离变化特征包括:所述目标对象与所述头戴式显示设备之间的目标距离变化量;
所述基于所述距离变化特征对所述显示部件进行调焦,以调整虚拟媒体信息的显示位置,包括:
基于单位距离变化量对应的焦距调整量,以及所述目标距离变化量,调整所述显示部件的焦距,以调整虚拟媒体信息的显示位置。
可选地,所述基于单位距离变化量对应的焦距调整量,以及所述目标距离变化量,调整所述显示部件的焦距,以调整虚拟媒体信息的显示位置,包括:
若所述目标距离变化量大于0,则基于单位距离变化量对应的焦距调整量,以及所述目标距离变化量,增大所述显示部件的焦距,以调整虚拟媒体信息的显示位置;
若所述目标距离变化量小于0,则基于单位距离变化量对应的焦距调整量,以及所述目标距离变化量,减小所述显示部件的焦距,以调整虚拟媒体信息的显示位置。
可选地,还包括:
若所述动作识别结果与预设的调焦属性调整动作匹配,则调整所述单位距离变化量对应的焦距调整量。
可选地,所述调焦属性调整动作包括增大焦距调整量动作和减小焦距调整量动作;
所述若所述动作识别结果与预设的调焦属性调整动作匹配,则调整所述单位距离变化量对应的焦距调整量,包括:
若所述动作识别结果与所述增大焦距调整量动作匹配,则增大所述单位距离变化量对应的焦距调整量;
若所述动作识别结果与所述减小焦距调整量动作匹配,则减小所述单位距离变化量对应的焦距调整量。
一方面,本申请实施例提供了一种显示部件的调焦装置,应用于头戴式显示设备,包括:
采集模块,用于通过媒体信息采集部件采集目标对象的媒体信息,并对所述媒体信息进行动作识别,获得动作识别结果;
匹配模块,用于若所述动作识别结果与预设的针对显示部件的调焦启动动作匹配,则启动针对所述显示部件的调焦功能;
调焦模块,用于监测所述目标对象与所述头戴式显示设备之间的距离变化特征,并基于所述距离变化特征对所述显示部件进行调焦,以调整虚拟媒体信息的显示位置。
可选地,所述调焦模块具体用于:
通过与所述目标对象绑定的无线设备,以及与所述头戴式显示设备绑定的无线设备,监测所述目标对象与所述头戴式显示设备之间的间隔距离;
基于获得的多个间隔距离,确定所述目标对象与所述头戴式显示设备之间的距离变化特征。
可选地,所述匹配模块还用于:
若所述动作识别结果与预设的针对显示部件的调焦关闭动作匹配,则关闭针对所述显示部件的调焦功能。
可选地,所述距离变化特征包括:所述目标对象与所述头戴式显示设备之间的目标距离变化量;
所述调焦模块具体用于:
基于单位距离变化量对应的焦距调整量,以及所述目标距离变化量,调整所述显示部件的焦距,以调整虚拟媒体信息的显示位置。
可选地,所述调焦模块具体用于:
若所述目标距离变化量大于0,则基于单位距离变化量对应的焦距调整量,以及所述目标距离变化量,增大所述显示部件的焦距,以调整虚拟媒体信息的显示位置;
若所述目标距离变化量小于0,则基于单位距离变化量对应的焦距调整量,以及所述目标距离变化量,减小所述显示部件的焦距,以调整虚拟媒体信息的显示位置。
可选地,所述匹配模块还用于:
若所述动作识别结果与预设的调焦属性调整动作匹配,则调整所述单位距离变化量对应的焦距调整量。
可选地,所述调焦属性调整动作包括增大焦距调整量动作和减小焦距调整量动作;
所述匹配模块具体用于:
若所述动作识别结果与所述增大焦距调整量动作匹配,则增大所述单位距离变化量对应的焦距调整量;
若所述动作识别结果与所述减小焦距调整量动作匹配,则减小所述单位距离变化量对应的焦距调整量。
一方面,本申请实施例提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现上述显示部件的调焦方法的步骤。
一方面,本申请实施例提供了一种计算机可读存储介质,其存储有可由计算机设备执行的计算机程序,当所述程序在计算机设备上运行时,使得所述计算机设备执行上述显示部件的调焦方法的步骤。
本申请实施例中,对采集的媒体信息进行动作识别,并在确定动作识别结果与预设的针对显示部件的调焦启动动作匹配时,基于目标对象与头戴式显示设备之间的距离变化特征对显示部件进行调焦,以调整虚拟媒体信息的显示位置,故针对近视用户或远视用户来说,均能看到清晰的图像或视频,而不需要用户不断寻找佩戴在头部的头戴式显示设备的按钮实现调焦,从而提高调焦的效率。而且,本申请的调焦方式更加符合用户的使用习惯,更加直观且便利。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种系统架构的结构示意图;
图2为本申请实施例提供的一种显示部件的调焦方法的流程示意图一;
图3为本申请实施例提供的一种显示部件的调焦方法的流程示意图二;
图4为本申请实施例提供的一种手势的示意图一;
图5为本申请实施例提供的一种手部移动方向的示意图一;
图6为本申请实施例提供的一种手部移动方向的示意图二;
图7为本申请实施例提供的一种手势的示意图二;
图8为本申请实施例提供的一种显示部件的调焦装置的结构示意图;
图9为本申请实施例提供的一种计算机设备的结构示意图。
具体实施方式
为了使本发明的目的、技术方案及有益效果更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
为了方便理解,下面对本发明实施例中涉及的名词进行解释。
焦距:在凸透镜成像中,焦距指凸透镜中心到焦点的距离。
显示部件调焦:通过调节焦距或者调节屈光度或者调节物距,使显示部件在某个距离上的虚拟图像的清晰度最高。
虚拟图像:物体发出的光线经折射或反射后,光路改变,人眼看到折射或反射后的光线,会感觉光线来自其反向延长线交点的位置,反向延长线相交而成的像就是虚拟图像,虚拟图像所在的平面称为虚像面。
参考图1,其为本申请实施例适用的一种头戴式显示设备的结构示意图,该头戴式显示设备100包括媒体信息采集部件101和显示部件102,其中,媒体信息采集部件101用于采集图像或视频等媒体信息。显示部件102包括左眼显示屏和右眼显示屏。
在AR眼镜或VR眼镜中,媒体信息采集部件101可用于采集基于视觉的跟踪定位图像,也可以用于采集动作识别图像,还可以用于采集其他需要的图像或视频。媒体信息采集部件101可用于展示媒体信息采集部件101采集的图像或视频,也可以用于展示AR眼镜或VR眼镜自主生成的图像或视频。
基于图1所示的系统架构图,本申请实施例提供了一种显示部件的调焦方法的流程,如图2所示,该方法的流程由计算机设备执行,该计算机设备可以是图1所示的头戴式显示设备,包括以下步骤:
步骤S201,通过媒体信息采集部件采集目标对象的媒体信息,并对媒体信息进行动作识别,获得动作识别结果。
具体地,媒体信息采集部件可以是安装在头戴式显示设备上的深度摄像头,也可以是安装在头戴式显示设备上的普通摄像头。目标对象可以是手部、脚部、头部等部位,媒体信息包括但不限于图像、视频。
在一些实施例中,采用模型驱动(model-driven)的方式或者数据驱动(data-driven)的方式对媒体信息进行动作识别,获得动作识别结果。针对不同的目标对象,相应的识别过程也是不相同的。
举例来说,当目标对象为手部时,则对手部的待识别图像进行手势识别,获得手势识别结果,其中,采用模型驱动(model-driven)的方式进行手势识别时,具体包括以下步骤:预先用手部位姿参数或节点位置,生成一系列手势几何模型,并建立一个搜索空间,该搜索空间中包括所有可能的手势几何模型。在进行手势识别时,从搜索空间中查询与待识别图像匹配的手势几何模型,并将匹配的手势几何模型的手部位姿参数,作为手势识别结果。
采用数据驱动(data-driven)的方式进行手势识别时,具体包括以下步骤:先采集训练样本以及对应的标签,然后采用机器学习算法,学习训练样本到标签的映射,获得手势识别模型,其中,机器学习算法包括但不限于随机森林、支持向量机、神经网络等。在进行手势识别时,将待识别图像输入手势识别模型,输出待识别图像对应的预测标签,该预测标签即为手势识别结果。
步骤S202,若动作识别结果与预设的针对显示部件的调焦启动动作匹配,则启动针对显示部件的调焦功能。
具体地,针对显示部件的调焦启动动作可以根据实际需求进行设置。比如,调焦启动动作可以是保持特殊手型超过预设时长,也可以是连续多个手型的组合等。通过设置特殊的手型作为调焦启动手势,可以有效将调焦启动手势与其他功能的手势区分,避免误启动调焦功能。
步骤S203,监测目标对象与头戴式显示设备之间的距离变化特征,并基于距离变化特征对显示部件进行调焦,以调整虚拟媒体信息的显示位置。
具体地,虚拟媒体信息包括但不限于虚拟图像和虚拟视频。当近视用户佩戴AR眼镜或VR眼镜等头戴式显示设备时,虚拟媒体信息到用户眼睛的距离过大,会使得近视用户看到的画面变得模糊不清,大大降低了近视用户的观赏体验。当远视用户佩戴AR眼镜或VR眼镜等头戴式显示设备时,虚拟媒体信息到用户眼睛的距离过小,使得远视用户看到的画面变得模糊不清,大大降低了远视用户的观赏体验。因此,针对近视用户和远视用户,通过对显示设备进行调焦以调整虚拟媒体信息的显示位置,即调整虚拟媒体信息与用户眼睛的距离,使虚拟媒体信息与近视用户的眼睛的距离更近,与远视用户的眼睛的距离更远,从而使得近视用户和远视用户均可以看到清晰的画面。
在一些实施例中,距离变化特征包括:目标对象与头戴式显示设备之间的目标距离变化量。目标距离变化量可以是:本次检测获得的目标对象与头戴式显示设备之间的间隔距离,与前一次检测获得的目标对象与头戴式显示设备之间的间隔距离的差值。
当目标距离变化量大于0时,表示目标对象的移动方向为远离头戴式显示设备;当目标距离变化量小于0时,表示目标对象的移动方向为靠近头戴式显示设备;目标距离变化量等于0时,表示目标对象与头戴式显示设备的间隔距离没有变化。
基于目标距离变化量对显示部件进行调焦,并在每次调焦后,用户可以观察显示部件上显示的画面是否更加清晰,若是,则目标对象继续沿着原本的移动方向移动,并触发进一步调焦,直到画面的清晰度达到预设要求。当画面变得模糊时,目标对象沿着相反的移动方向移动,并触发进一步调焦,直到画面的清晰度达到预设要求。
本申请实施例中,对采集的媒体信息进行动作识别,并在确定动作识别结果与预设的针对显示部件的调焦启动动作匹配时,基于目标对象与头戴式显示设备之间的距离变化特征对显示部件进行调焦,以调整虚拟媒体信息的显示位置,故针对近视用户或远视用户来说,均能看到清晰的图像或视频,而不需要用户不断寻找佩戴在头部的头戴式显示设备的按钮实现调焦,从而提高调焦的效率。而且,本申请的调焦方式更加符合用户的使用习惯,更加直观且便利。
在一些实施例中,对目标对象的媒体信息进行动作识别,获得动作识别结果之后,若动作识别结果与预设的针对显示部件的调焦关闭动作匹配,则关闭针对显示部件的调焦功能。
具体地,针对显示部件的调焦关闭动作可以根据实际需求进行设置。比如,调焦关闭动作可以是保持特殊手型超过预设时长,也可以是连续多个手型的组合等。通过设置特殊的手型作为调焦关闭手势,可以有效将调焦关闭手势与其他功能的手势区分,避免误关闭调焦功能。
可选地,在上述步骤S203中,本申请实施例至少采用以下几种实施方式监测目标对象与头戴式显示设备之间的距离变化特征:
实施方式一、通过媒体信息采集部件采集目标对象的媒体信息。然后通过对媒体信息进行动作识别,获得目标对象与头戴式显示设备之间的距离变化特征。
具体地,采用模型驱动(model-driven)的方式或者数据驱动(data-driven)的方式对媒体信息进行动作识别,获得目标对象与头戴式显示设备之间的距离变化特征。
以目标对象为手部展开来说,通过深度摄像头采集手部的待识别图像,然后通过对待识别图像进行手势识别,获得目标对象与头戴式显示设备之间增加或者减少的间隔距离。
实施方式二、通过与目标对象绑定的无线设备,以及与头戴式显示设备绑定的无线设备,监测目标对象与头戴式显示设备之间的间隔距离。然后基于获得的多个间隔距离,确定目标对象与头戴式显示设备之间的距离变化特征。
具体地,与目标对象绑定的无线设备按照约定周期性发送无线信号,与头戴式显示设备绑定的无线设备接收到无线信号后,基于无线信号的接收时间以及无线信号的发送时间,计算目标对象与头戴式显示设备之间的间隔距离。基于前后两次计算获得的间隔距离,获得目标对象与头戴式显示设备之间的距离变化量。
本申请实施例中,通过动作识别模块对采集的目标对象的媒体信息进行动作识别,或者通过在目标对象和头戴式显示设备上绑定无线设备,实现检测目标对象与头戴式显示设备之间的距离变化特征,以实现基于距离变化特征对显示部件进行调焦,从而提高调焦的效率和便利性。
可选地,在上述步骤S203中,本申请实施例至少采用以下实施方式对显示部件进行调焦:
基于单位距离变化量对应的焦距调整量以及目标距离变化量,调整显示部件的焦距,以调整虚拟媒体信息的显示位置。
具体地,单位距离变化量对应的焦距调整量可以根据实际情况进行设置并调整。在实际应用中,可以通过调整显示设备透镜的间距来调整焦距,也可以是通过改变透镜的折射率来调整焦距(比如,液晶透镜通过改变液晶的排列方式,以产生相对应的折射率分布,进而获得相应的焦距),还可以通过微透镜阵列调焦、曲面反射镜组调焦等方式调整焦距。
对于近视用户来说,虚拟媒体信息到用户眼睛的距离过大,使得近视用户看到的画面变得模糊不清,因此需要减小焦距,以减小虚拟媒体信息与用户眼睛的距离,从而使得近视用户可以看到清晰的画面。对于远视用户来说,虚拟媒体信息到用户眼睛的距离过小,使得近视用户看到的画面变得模糊不清,因此需要增大焦距,以增大虚拟媒体信息与用户眼睛的距离,从而使得远视用户可以看到清晰的画面。因此,在基于目标距离变化量调整焦距时,具体采用以下调整方式:
若目标距离变化量大于0,说明目标对象的移动方向为远离头戴式显示设备,也表征此时虚拟媒体信息到用户眼睛的距离过小,则基于单位距离变化量对应的焦距调整量以及目标距离变化量,增大显示部件的焦距,以调整虚拟媒体信息的显示位置,即增大虚拟媒体信息与用户眼睛的距离,从而使得远视用户可以看到清晰的画面。
若目标距离变化量小于0,说明目标对象的移动方向为靠近头戴式显示设备,也表征此时虚拟媒体信息到用户眼睛的距离过大,则基于单位距离变化量对应的焦距调整量以及目标距离变化量,减小显示部件的焦距,以调整虚拟媒体信息的显示位置,即减小虚拟媒体信息与用户眼睛的距离,从而使得近视用户可以看到清晰的画面。
本申请实施例中,当目标对象的移动方向为远离头戴式显示设备时,增大显示部件的焦距,以增大虚拟媒体信息与用户眼睛的距离,从而使得远视用户可以看到清晰的画面。当目标对象的移动方向为靠近头戴式显示设备时,减少显示部件的焦距,以减少虚拟媒体信息与用户眼睛的距离,从而使得近视用户可以看到清晰的画面,进而提升头戴式显示设备的通用性以及用户体验。
需要说明的是,除了通过调整焦距对显示部件进行调焦之后,还可以通过调整屈光度或调整物距等方式对显示部件进行调焦,对此,本申请不做具体限定。
在一些实施例中,对目标对象的媒体信息进行动作识别,获得动作识别结果之后,若动作识别结果与预设的调焦属性调整动作匹配,则调整单位距离变化量对应的焦距调整量。
具体地,调焦属性调整动作可以根据实际需求进行设置。比如,调焦属性调整动作可以是保持特殊手型超过预设时长,也可以是连续多个手型的组合等。调焦属性调整动作、调焦启动动作、调焦关闭动作为不同的动作。调焦属性调整动作包括增大焦距调整量动作和减小焦距调整量动作。
若动作识别结果与增大焦距调整量动作匹配,则增大单位距离变化量对应的焦距调整量。若动作识别结果与减小焦距调整量动作匹配,则减小单位距离变化量对应的焦距调整量。
以目标对象为手部举例来说,对采集的手部的待识别图像进行手势识别,获得手势识别结果。若手势识别结果与增大焦距调整量手势匹配,则按照预设调整量增大单位距离变化量对应的焦距调整量。后续对显示部件进行调焦时,目标对象移动单位距离时,将对应调整更多的焦距,从而有效提高调焦的速度。
若手势识别结果与减小焦距调整量手势匹配,则按照预设调整量减小单位距离变化量对应的焦距调整量。后续对显示部件进行调焦时,目标对象移动单位距离时,将对应调整更少的焦距,从而有效提高调焦的精度。
本申请实施例中,通过对目标对象的媒体信息进行动作识别,并在动作识别结果与预设的调焦属性调整动作匹配时,增大或减小单位距离变化量对应的焦距调整量,从而满足用户不同的调焦要求,提高调焦的便利性。
在一些实施例中,目标对象与头戴式显示设备之间的间隔距离是在一定范围内的,即在目标对象在远离或靠近头戴式显示设备一定距离后,目标对象将无法或不容易再继续远离或靠近头戴式显示设备。也就是说,基于目标距离变化量对显示部件进行多次调焦后,用户若依然觉得看到的画面是模糊的,则无法或不容易再继续对显示部件进行调焦。鉴于此,本申请实施例提出通过调焦启动动作和调焦关闭动作组合进行调焦。
具体地,通过调焦启动动作,启动针对显示部件的调焦功能。针对远视用户来说,目标对象沿远离头戴式显示设备的方向移动。头戴式显示设备监测获得大于0的目标距离变化量,然后基于单位距离变化量对应的焦距调整量以及目标距离变化量,增大显示部件的焦距,以增大虚拟媒体信息与用户眼睛的距离。
此时,用户若依然觉得看到的画面是模糊的,且目标对象无法或不容易再继续远离头戴式显示设备,则通过调焦关闭动作,关闭针对显示部件的调焦功能,然后拉近目标对象与头戴式显示设备的间隔距离。再利用调焦启动动作,重新启动针对显示部件的调焦功能,此时,目标对象沿远离头戴式显示设备的方向移动时,可以继续进行调焦,直到用户看到清晰的画面。
相应地,针对近视用户来说,目标对象沿靠近头戴式显示设备的方向移动。头戴式显示设备监测获得小于0的目标距离变化量,然后基于单位距离变化量对应的焦距调整量以及目标距离变化量,减小显示部件的焦距,以减小虚拟媒体信息与用户眼睛的距离。
此时,用户若依然觉得看到的画面是模糊的,且目标对象无法或不容易再继续靠近头戴式显示设备,则通过调焦关闭动作,关闭针对显示部件的调焦功能,然后拉远目标对象与头戴式显示设备的间隔距离。再利用调焦启动动作,重新启动针对显示部件的调焦功能,此时,目标对象沿靠近头戴式显示设备的方向移动时,可以继续进行调焦,直到用户看到清晰的画面。
本申请实施例中,通过调焦启动动作和调焦关闭动作组合对第二拍摄设备进行调焦,可以有效增大调焦的范围,从而提高调焦的便利性和效率。
为了更好地解释本申请实施例,下面结合具体实施场景介绍本申请实施例提供的一种显示部件的调焦方法,该方法的流程可以由图1所示的头戴式显示设备执行,包括以下步骤,如图3所示:
步骤S301,通过深度摄像头采集手部的图像X。
步骤S302,对图像X进行手势识别,获得手势识别结果。
步骤S303,在确定手势识别结果与预设的针对显示部件的调焦启动手势匹配时,启动针对显示部件的调焦功能。
具体地,图像X如图4所示。对图像X进行手势识别,获得第一手势,而预设的针对显示部件的调焦启动手势也是第一手势,因此,手势识别结果与预设的针对显示部件的调焦启动手势匹配,故启动针对显示部件的调焦功能。
步骤S304,通过手部和头戴式显示设备各自绑定的无线设备,监测手部与头戴式显示设备之间的目标距离变化量。
步骤S305,判断目标距离变化量是否大于0,若是,则执行步骤S306,否则执行步骤S307。
步骤S306,基于单位距离变化量对应的焦距调整量以及目标距离变化量,增大显示部件的焦距。
具体地,参见图5,手部沿远离头戴式显示设备的方向移动时,监测到的手部与头戴式显示设备之间的目标距离变化量大于0,则相应增大显示部件的焦距。
步骤S307,基于单位距离变化量对应的焦距调整量以及目标距离变化量,减小显示部件的焦距。
具体地,参见图6,手部沿靠近头戴式显示设备的方向移动时,监测到的手部与头戴式显示设备之间的目标距离变化量小于0,则相应减小显示部件的焦距。
步骤S308,通过深度摄像头采集手部的图像Y。
步骤S309,对图像Y进行手势识别,获得手势识别结果。
步骤S310,在确定手势识别结果与预设的针对显示部件的调焦关闭手势匹配时,关闭针对显示部件的调焦功能。
具体地,图像Y如图7所示,对图像Y进行手势识别,获得第二手势,而预设的针对显示部件的调焦关闭手势也是第二手势,因此,手势识别结果与预设的针对显示部件的调焦关闭手势匹配,故关闭针对显示部件的调焦功能。
本申请实施例中,对采集的媒体信息进行动作识别,并在确定动作识别结果与预设的针对显示部件的调焦启动动作匹配时,基于目标对象与头戴式显示设备之间的距离变化特征对显示部件进行调焦,以调整虚拟媒体信息的显示位置,故针对近视用户或远视用户来说,均能看到清晰的图像或视频,而不需要用户不断寻找佩戴在头部的头戴式显示设备的按钮实现调焦,从而提高调焦的效率。而且,本申请的调焦方式更加符合用户的使用习惯,更加直观且便利。
基于相同的技术构思,本申请实施例提供了一种显示部件的调焦装置的结构示意图,应用于头戴式显示设备,如图8所示,该装置800包括:
采集模块801,用于通过媒体信息采集部件采集目标对象的媒体信息,并对所述媒体信息进行动作识别,获得动作识别结果;
匹配模块802,用于若所述动作识别结果与预设的针对显示部件的调焦启动动作匹配,则启动针对所述显示部件的调焦功能;
调焦模块803,用于监测所述目标对象与所述头戴式显示设备之间的距离变化特征,并基于所述距离变化特征对所述显示部件进行调焦,以调整虚拟媒体信息的显示位置。
可选地,所述调焦模块803具体用于:
通过与所述目标对象绑定的无线设备,以及与所述头戴式显示设备绑定的无线设备,监测所述目标对象与所述头戴式显示设备之间的间隔距离;
基于获得的多个间隔距离,确定所述目标对象与所述头戴式显示设备之间的距离变化特征。
可选地,所述匹配模块802还用于:
若所述动作识别结果与预设的针对显示部件的调焦关闭动作匹配,则关闭针对所述显示部件的调焦功能。
可选地,所述距离变化特征包括:所述目标对象与所述头戴式显示设备之间的目标距离变化量;
所述调焦模块803具体用于:
基于单位距离变化量对应的焦距调整量,以及所述目标距离变化量,调整所述显示部件的焦距,以调整虚拟媒体信息的显示位置。
可选地,所述调焦模块803具体用于:
若所述目标距离变化量大于0,则基于单位距离变化量对应的焦距调整量,以及所述目标距离变化量,增大所述显示部件的焦距,以调整虚拟媒体信息的显示位置;
若所述目标距离变化量小于0,则基于单位距离变化量对应的焦距调整量,以及所述目标距离变化量,减小所述显示部件的焦距,以调整虚拟媒体信息的显示位置。
可选地,所述匹配模块802还用于:
若所述动作识别结果与预设的调焦属性调整动作匹配,则调整所述单位距离变化量对应的焦距调整量。
可选地,所述调焦属性调整动作包括增大焦距调整量动作和减小焦距调整量动作;
所述匹配模块802具体用于:
若所述动作识别结果与所述增大焦距调整量动作匹配,则增大所述单位距离变化量对应的焦距调整量;
若所述动作识别结果与所述减小焦距调整量动作匹配,则减小所述单位距离变化量对应的焦距调整量。
本申请实施例中,对采集的媒体信息进行动作识别,并在确定动作识别结果与预设的针对显示部件的调焦启动动作匹配时,基于目标对象与头戴式显示设备之间的距离变化特征对显示部件进行调焦,以调整虚拟媒体信息的显示位置,故针对近视用户或远视用户来说,均能看到清晰的图像或视频,而不需要用户不断寻找佩戴在头部的头戴式显示设备的按钮实现调焦,从而提高调焦的效率。而且,本申请的调焦方式更加符合用户的使用习惯,更加直观且便利。
基于相同的技术构思,本申请实施例提供了一种计算机设备,该计算机设备可以是图1所示的头戴式显示设备,如图9所示,包括至少一个处理器901,以及与至少一个处理器连接的存储器902,本申请实施例中不限定处理器901与存储器902之间的具体连接介质,图9中处理器901和存储器902之间通过总线连接为例。总线可以分为地址总线、数据总线、控制总线等。
在本申请实施例中,存储器902存储有可被至少一个处理器901执行的指令,至少一个处理器901通过执行存储器902存储的指令,可以执行上述显示部件的调焦方法的步骤。
其中,处理器901是计算机设备的控制中心,可以利用各种接口和线路连接计算机设备的各个部分,通过运行或执行存储在存储器902内的指令以及调用存储在存储器902内的数据,从而实现显示部件的调焦。可选的,处理器901可包括一个或多个处理单元,处理器901可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器901中。在一些实施例中,处理器901和存储器902可以在同一芯片上实现,在一些实施例中,它们也可以在独立的芯片上分别实现。
处理器901可以是通用处理器,例如中央处理器(CPU)、数字信号处理器、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件,可以实现或者执行本申请实施例中公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者任何常规的处理器等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。
存储器902作为一种非易失性计算机可读存储介质,可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块。存储器902可以包括至少一种类型的存储介质,例如可以包括闪存、硬盘、多媒体卡、卡型存储器、随机访问存储器(Random AccessMemory,RAM)、静态随机访问存储器(Static Random Access Memory,SRAM)、可编程只读存储器(Programmable Read Only Memory,PROM)、只读存储器(Read Only Memory,ROM)、带电可擦除可编程只读存储器(Electrically Erasable Programmable Read-Only Memory,EEPROM)、磁性存储器、磁盘、光盘等等。存储器902是能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机设备存取的任何其他介质,但不限于此。本申请实施例中的存储器902还可以是电路或者其它任意能够实现存储功能的装置,用于存储程序指令和/或数据。
基于同一发明构思,本申请实施例提供了一种计算机可读存储介质,其存储有可由计算机设备执行的计算机程序,当程序在计算机设备上运行时,使得计算机设备执行上述显示部件的调焦方法的步骤。
本领域内的技术人员应明白,本发明的实施例可提供为方法、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机设备或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机设备或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机设备或其他可编程数据处理设备上,使得在计算机设备或其他可编程设备上执行一系列操作步骤以产生计算机设备实现的处理,从而在计算机设备或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种显示部件的调焦方法,应用于头戴式显示设备,其特征在于,包括:
通过媒体信息采集部件采集目标对象的媒体信息,并对所述媒体信息进行动作识别,获得动作识别结果;
若所述动作识别结果与预设的针对显示部件的调焦启动动作匹配,则启动针对所述显示部件的调焦功能;
监测所述目标对象与所述头戴式显示设备之间的距离变化特征,并基于所述距离变化特征对所述显示部件进行调焦,以调整虚拟媒体信息的显示位置。
2.如权利要求1所述的方法,其特征在于,所述监测目标对象与所述显示部件之间的距离变化特征,包括:
通过与所述目标对象绑定的无线设备,以及与所述头戴式显示设备绑定的无线设备,监测所述目标对象与所述头戴式显示设备之间的间隔距离;
基于获得的多个间隔距离,确定所述目标对象与所述头戴式显示设备之间的距离变化特征。
3.如权利要求1所述的方法,其特征在于,还包括:
若所述动作识别结果与预设的针对显示部件的调焦关闭动作匹配,则关闭针对所述显示部件的调焦功能。
4.如权利要求1所述的方法,其特征在于,所述距离变化特征包括:所述目标对象与所述头戴式显示设备之间的目标距离变化量;
所述基于所述距离变化特征对所述显示部件进行调焦,以调整虚拟媒体信息的显示位置,包括:
基于单位距离变化量对应的焦距调整量,以及所述目标距离变化量,调整所述显示部件的焦距,以调整虚拟媒体信息的显示位置。
5.如权利要求4所述的方法,其特征在于,所述基于单位距离变化量对应的焦距调整量,以及所述目标距离变化量,调整所述显示部件的焦距,以调整虚拟媒体信息的显示位置,包括:
若所述目标距离变化量大于0,则基于单位距离变化量对应的焦距调整量,以及所述目标距离变化量,增大所述显示部件的焦距,以调整虚拟媒体信息的显示位置;
若所述目标距离变化量小于0,则基于单位距离变化量对应的焦距调整量,以及所述目标距离变化量,减小所述显示部件的焦距,以调整虚拟媒体信息的显示位置。
6.如权利要求4所述的方法,其特征在于,还包括:
若所述动作识别结果与预设的调焦属性调整动作匹配,则调整所述单位距离变化量对应的焦距调整量。
7.如权利要求6所述的方法,其特征在于,所述调焦属性调整动作包括增大焦距调整量动作和减小焦距调整量动作;
所述若所述动作识别结果与预设的调焦属性调整动作匹配,则调整所述单位距离变化量对应的焦距调整量,包括:
若所述动作识别结果与所述增大焦距调整量动作匹配,则增大所述单位距离变化量对应的焦距调整量;
若所述动作识别结果与所述减小焦距调整量动作匹配,则减小所述单位距离变化量对应的焦距调整量。
8.一种显示部件的调焦装置,应用于头戴式显示设备,其特征在于,包括:
采集模块,用于通过媒体信息采集部件采集目标对象的媒体信息,并对所述媒体信息进行动作识别,获得动作识别结果;
匹配模块,用于若所述动作识别结果与预设的针对显示部件的调焦启动动作匹配,则启动针对所述显示部件的调焦功能;
调焦模块,用于监测所述目标对象与所述头戴式显示设备之间的距离变化特征,并基于所述距离变化特征对所述显示部件进行调焦,以调整虚拟媒体信息的显示位置。
9.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现权利要求1~7任一所述方法的步骤。
10.一种计算机可读存储介质,其特征在于,其存储有可由计算机设备执行的计算机程序,当所述程序在计算机设备上运行时,使得所述计算机设备执行权利要求1~7任一所述方法的步骤。
CN202211141072.9A 2022-09-20 2022-09-20 一种显示部件的调焦方法及装置 Pending CN115471914A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211141072.9A CN115471914A (zh) 2022-09-20 2022-09-20 一种显示部件的调焦方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211141072.9A CN115471914A (zh) 2022-09-20 2022-09-20 一种显示部件的调焦方法及装置

Publications (1)

Publication Number Publication Date
CN115471914A true CN115471914A (zh) 2022-12-13

Family

ID=84332483

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211141072.9A Pending CN115471914A (zh) 2022-09-20 2022-09-20 一种显示部件的调焦方法及装置

Country Status (1)

Country Link
CN (1) CN115471914A (zh)

Similar Documents

Publication Publication Date Title
US11495002B2 (en) Systems and methods for determining the scale of human anatomy from images
CN108919958B (zh) 一种图像传输方法、装置、终端设备及存储介质
EP3590027B1 (en) Multi-perspective eye-tracking for vr/ar systems
US10241329B2 (en) Varifocal aberration compensation for near-eye displays
JP2019527377A (ja) 視線追跡に基づき自動合焦する画像捕捉システム、デバイス及び方法
EP3625648A1 (en) Near-eye display with extended effective eyebox via eye tracking
CN109073897B (zh) 用于为电子信息装置提供显示装置的方法
CN108124509B (zh) 图像显示方法、穿戴式智能设备及存储介质
JP2014219621A (ja) 表示装置、表示制御プログラム
US10595001B2 (en) Apparatus for replaying content using gaze recognition and method thereof
US11798177B2 (en) Hand tracking method, device and system
EP3438882B1 (en) Eye gesture tracking
Sun et al. Real-time gaze estimation with online calibration
US20230037866A1 (en) Device and method for acquiring depth of space by using camera
CN111886564A (zh) 信息处理装置、信息处理方法和程序
CN109474816B (zh) 增强现实的虚实融合装置及其虚实融合方法、设备、介质
US11487358B1 (en) Display apparatuses and methods for calibration of gaze-tracking
CN104969547A (zh) 用于3d视觉内容的自动化评估的技术
CN114585990A (zh) 部分地基于眼睛跟踪的呈现增强
CN115471914A (zh) 一种显示部件的调焦方法及装置
CN110908500A (zh) 目标物信息的预载显示方法及装置
CN115542513A (zh) 一种拍摄部件的调焦方法及装置
KR20220067964A (ko) 카메라 시야(fov) 가장자리에서 움직임을 인식하여 전자 장치를 제어하는 방법 및 그 전자 장치
CN113132642A (zh) 图像显示的方法及装置、电子设备
US20190347833A1 (en) Head-mounted electronic device and method of utilizing the same

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination