CN111986269A - 虚像距控制方法、装置及系统、电子设备 - Google Patents
虚像距控制方法、装置及系统、电子设备 Download PDFInfo
- Publication number
- CN111986269A CN111986269A CN202010864972.0A CN202010864972A CN111986269A CN 111986269 A CN111986269 A CN 111986269A CN 202010864972 A CN202010864972 A CN 202010864972A CN 111986269 A CN111986269 A CN 111986269A
- Authority
- CN
- China
- Prior art keywords
- virtual image
- image distance
- camera module
- terminal
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 49
- 230000003190 augmentative effect Effects 0.000 claims abstract description 20
- 210000001747 pupil Anatomy 0.000 claims description 22
- 230000003287 optical effect Effects 0.000 claims description 12
- 238000010586 diagram Methods 0.000 description 17
- 230000006870 function Effects 0.000 description 12
- 238000004891 communication Methods 0.000 description 10
- 230000008569 process Effects 0.000 description 9
- 238000007726 management method Methods 0.000 description 7
- 238000003384 imaging method Methods 0.000 description 6
- 230000005236 sound signal Effects 0.000 description 6
- 238000012360 testing method Methods 0.000 description 6
- 230000001133 acceleration Effects 0.000 description 3
- 238000010295 mobile communication Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 210000000988 bone and bone Anatomy 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- User Interface Of Digital Computer (AREA)
- Studio Devices (AREA)
Abstract
本公开提供一种虚像距控制方法、虚像距控制装置、虚像距控制系统和电子设备,涉及增强现实或虚拟现实技术领域。该虚像距控制方法包括:对终端的摄像头模组进行标定,以固定终端的摄像头模组中的音圈电机的位置;基于所述位置的音圈电机控制所述终端的摄像头模组获取目标设备的虚像,并根据所述虚像的图像参数对所述目标设备的虚像距进行控制,以使所述目标设备中的虚像距保持一致。本公开实施例能够减小误差,提高确定目标设备的虚像距的精准性。
Description
技术领域
本公开涉及增强现实或虚拟现实技术领域,具体而言,涉及一种虚像距控制方法、虚像距控制装置、虚像距控制系统和电子设备。
背景技术
对于增强现实和虚拟现实应用中的双目摄像头而言,需要对增强现实和虚拟现实中所使用的双目摄像头的虚像距进行监控,以将虚像距控制在一定范围内。
相关技术中,对于增强现实和虚拟现实的虚像距的测量一般采用的是长焦数码镜头。由于焦距较长,视场角较小,只能够观察中心区域的视场角,只依靠中心区域判定虚像距,存在较大偏差,因此准确性较差,进而使得图像质量较差。并且,上述方式存在一定的局限性。
发明内容
本公开提供一种虚像距控制方法、虚像距控制装置、虚像距控制系统和电子设备,进而至少在一定程度上克服无法准确确定虚像距的问题。
根据本公开的一个方面,提供一种虚像距控制方法,包括:对终端的摄像头模组进行标定,以固定终端的摄像头模组中的音圈电机的位置;基于所述位置的音圈电机控制所述终端的摄像头模组获取目标设备的虚像,并根据所述虚像的图像参数对所述目标设备的虚像距进行控制,以使所述目标设备中的虚像距保持一致。
根据本公开的一个方面,提供一种虚像距控制装置,包括:位置标定模块,用于对终端的摄像头模组进行标定,以固定终端的摄像头模组中的音圈电机的位置;虚像距确定模块,用于基于所述位置的音圈电机控制所述终端的摄像头模组获取目标设备的虚像,并根据所述虚像的图像参数对所述目标设备的虚像距进行控制,以使所述目标设备中的虚像距保持一致。
根据本公开的一个方面,提供一种虚像距控制系统,包括:目标设备;终端的摄像头模组,用于采集所述目标设备中的虚像,并根据所述虚像的图像参数对所述目标设备的虚像距进行控制。
根据本公开的一个方面,提供一种电子设备,包括:处理器;以及存储器,用于存储所述处理器的可执行指令;其中,所述处理器配置为经由执行所述可执行指令来执行上述任意一项所述的虚像距控制方法。
在本公开的一些实施例所提供的虚像距控制方法、装置、虚像距控制系统和电子设备中,一方面,通过固定位置的音圈电机来控制终端的摄像头模组获取目标设备的虚像,进而根据虚像的图像参数来对目标设备的虚像距进行控制,以使目标设备的虚像距保持一致。其中,利用终端的摄像头模组焦距可调的特点,对目标设备的虚像距进行标定,能够准确得到目标设备的虚像距,且可以保证全视场图像清晰,均匀性好,提高图像质量。另一方面,终端的手机摄像头模组的音圈电机具有较大调节范围,基于该音圈电机来控制终端的摄像头模组,可以对不同规格的目标设备进行标定,避免了局限性,能够对所有类型和所有规格的目标设备的虚像距进行标定,增加了通用性和应用范围。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。显而易见地,下面描述中的附图仅仅是本公开的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。在附图中:
图1示出了可以应用本公开实施例的虚像距控制方法的应用场景的示意图;
图2示出了适于用来实现本公开实施例的电子设备的结构示意图;
图3示出了本公开实施例中虚像距控制方法的流程示意图;
图4示出了本公开实施例中摄像头模组标定的示意图;
图5示出了本公开实施例中对目标设备的虚像距进行控制的流程示意图;
图6示出了本公开实施例中调节目标设备的虚像距的示意图;
图7示出了本公开实施例中终端的摄像头模组的景深值的示意图;
图8示意性示出了本公开示例性实施例中虚像距控制装置的方框图;
图9示意性示出了本公开示例性实施例中虚像距控制系统的方框图。
具体实施方式
现在将参考附图更全面地描述示例实施方式。然而,示例实施方式能够以多种形式实施,且不应被理解为限于在此阐述的范例;相反,提供这些实施方式使得本公开将更加全面和完整,并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。在下面的描述中,提供许多具体细节从而给出对本公开的实施方式的充分理解。然而,本领域技术人员将意识到,可以实践本公开的技术方案而省略所述特定细节中的一个或更多,或者可以采用其它的方法、组元、装置、步骤等。在其它情况下,不详细示出或描述公知技术方案以避免喧宾夺主而使得本公开的各方面变得模糊。
此外,附图仅为本公开的示意性图解,并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分,因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体,不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功能实体,或在一个或多个硬件模块或集成电路中实现这些功能实体,或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
附图中所示的流程图仅是示例性说明,不是必须包括所有的步骤。例如,有的步骤还可以分解,而有的步骤可以合并或部分合并,因此实际执行的顺序有可能根据实际情况改变。另外,下面所有的术语“第一”、“第二”仅是为了区分的目的,不应作为本公开内容的限制。
图1示出了可以应用本公开实施例的虚像距控制方法或虚像距控制装置的应用场景100的示意图。
该虚像距控制方法可以应用于虚拟现实场景或者是增强现实场景中。参考图1中所示,在目标设备101的虚像距的基础上,可以使用终端102的摄像头模组来对目标对象103进行清晰成像,从而对目标设备101进行标定。目标设备可以为任意类型的增强现实设备或者是虚拟现实设备。终端可以为智能终端(例如智能手机)。目标物体可以为待拍摄的任何对象,此处不做限定。
本公开实施例中,基于上述应用场景,首先可以对终端的摄像头模组进行标定。在此基础上,可以虚像的清晰度最大为目标,调节目标设备的虚像距。
需要说明的是,本公开实施例所提供的虚像距控制方法可以完全由服务器来执行,也可以完全由终端来执行。相应地,虚像距控制装置可设置于终端或者是服务器中。
图2示出了适于用来实现本公开示例性实施方式的一种电子设备的示意图。需要说明的是,图2示出的电子设备仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
本公开的电子设备至少包括处理器和存储器,存储器用于存储一个或多个程序,当一个或多个程序被处理器执行时,使得处理器可以实现本公开示例性实施方式的虚像距控制方法。
具体的,如图2所示,电子设备200可以包括:处理器210、内部存储器221、外部存储器接口222、通用串行总线(Universal Serial Bus,USB)接口230、充电管理模块240、电源管理模块241、电池242、天线1、天线2、移动通信模块250、无线通信模块260、音频模块270、扬声器271、受话器272、麦克风273、耳机接口274、传感器模块280、显示屏290、摄像模组291、指示器292、马达293、按键294以及用户标识模块(Subscriber IdentificationModule,SIM)卡接口295等。其中传感器模块280可以包括深度传感器2801、压力传感器2802、陀螺仪传感器2803、气压传感器2804、磁传感器2805、加速度传感器2806、距离传感器2807、接近光传感器2808、指纹传感器2809、温度传感器2810、触摸传感器2811、环境光传感器2812及骨传导传感器2813等。
可以理解的是,本申请实施例示意的结构并不构成对电子设备200的具体限定。在本申请另一些实施例中,电子设备200可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件、软件或软件和硬件的组合实现。
处理器210可以包括一个或多个处理单元,例如:处理器210可以包括应用处理器(Application Processor,AP)、调制解调处理器、图形处理器(Graphics ProcessingUnit,GPU)、图像信号处理器(Image Signal Processor,ISP)、控制器、视频编解码器、数字信号处理器(Digital Signal Processor,DSP)、基带处理器和/或神经网络处理器(Neural-etwork Processing Unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。另外,处理器210中还可以设置存储器,用于存储指令和数据。
USB接口230是符合USB标准规范的接口,具体可以是MiniUSB接口,MicroUSB接口,USBTypeC接口等。USB接口230可以用于连接充电器为电子设备200充电,也可以用于电子设备200与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备,例如AR设备等。
充电管理模块240用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。电源管理模块241用于连接电池242、充电管理模块240与处理器210。电源管理模块241接收电池242和/或充电管理模块240的输入,为处理器210、内部存储器221、显示屏290、摄像模组291和无线通信模块260等供电。
电子设备200的无线通信功能可以通过天线1、天线2、移动通信模块250、无线通信模块260、调制解调处理器以及基带处理器等实现。
移动通信模块250可以提供应用在电子设备200上的包括2G/3G/4G/5G等无线通信的解决方案。
无线通信模块260可以提供应用在电子设备200上的包括无线局域网(WirelessLocal Area Networks,WLAN)(如无线保真(Wireless Fidelity,Wi-Fi)网络)、蓝牙(Bluetooth,BT)、全球导航卫星系统(Global Navigation Satellite System,GNSS)、调频(Frequency Modulation,FM)、近距离无线通信技术(Near Field Communication,NFC)、红外技术(Infrared,IR)等无线通信的解决方案。
电子设备200通过GPU、显示屏290及应用处理器等实现显示功能。GPU为虚像距控制的微处理器,连接显示屏290和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器210可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
电子设备200可以通过ISP、摄像模组291、视频编解码器、GPU、显示屏290及应用处理器等实现拍摄功能。在一些实施例中,电子设备200可以包括1个或N个摄像模组291,N为大于1的正整数,若电子设备200包括N个摄像头,N个摄像头中有一个是主摄像头,其他可以为副摄像头,例如长焦摄像头。
内部存储器221可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。内部存储器221可以包括存储程序区和存储数据区。外部存储器接口222可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备200的存储能力。
电子设备200可以通过音频模块270、扬声器271、受话器272、麦克风273、耳机接口274及应用处理器等实现音频功能。例如音乐播放、录音等。
音频模块270用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块270还可以用于对音频信号编码和解码。在一些实施例中,音频模块270可以设置于处理器210中,或将音频模块270的部分功能模块设置于处理器210中。
扬声器271,用于将音频电信号转换为声音信号。电子设备200可以通过扬声器271收听音乐,或收听免提通话。受话器272,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备200接听电话或语音信息时,可以通过将受话器272靠近人耳接听语音。麦克风273,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风273发声,将声音信号输入到麦克风273。电子设备200可以设置至少一个麦克风273。耳机接口274用于连接有线耳机。
针对电子设备200包括的传感器,深度传感器2801用于获取景物的深度信息。压力传感器2802用于感受压力信号,可以将压力信号转换成电信号。陀螺仪传感器2803可以用于确定电子设备200的运动姿态。气压传感器2804用于测量气压。磁传感器2805包括霍尔传感器。电子设备200可以利用磁传感器2805检测翻盖皮套的开合。加速度传感器2806可检测电子设备200在各个方向上(一般为三轴)加速度的大小。距离传感器2807用于测量距离。接近光传感器2808可以包括例如发光二极管(LED)和光检测器,例如光电二极管。指纹传感器2809用于采集指纹。温度传感器2810用于检测温度。触摸传感器2811可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏290提供与触摸操作相关的视觉输出。环境光传感器2812用于感知环境光亮度。骨传导传感器2813可以获取振动信号。
按键294包括开机键,音量键等。按键294可以是机械按键。也可以是触摸式按键。马达293可以产生振动提示。马达293可以用于来电振动提示,也可以用于触摸振动反馈。指示器292可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。SIM卡接口295用于连接SIM卡。电子设备200通过SIM卡和网络交互,实现通话以及数据通信等功能。
本申请还提供了一种计算机可读存储介质,该计算机可读存储介质可以是上述实施例中描述的电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。
计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读存储介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读存储介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
计算机可读存储介质承载有一个或者多个程序,当上述一个或者多个程序被一个该电子设备执行时,使得该电子设备实现如下述实施例中所述的方法。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现,所描述的单元也可以设置在处理器中。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定。
本公开实施例中,首先提供了一种虚像距控制方法。该虚像距控制方法除了在装配中定标AR或VR产品的虚像距,还可以用来测试AR或VR产品的虚像距。图3中示意性示出了该虚像距控制方法的流程示意图。参考图3中所示,主要包括以下步骤:
在步骤S310中,对终端的摄像头模组进行标定,以固定终端的摄像头模组中的音圈电机的位置;
在步骤S320中,基于固定位置的所述终端的摄像头模组以及虚像的图像参数,对目标设备的虚像距进行控制,以使所述目标设备中包含的双目摄像头模组的虚像距保持一致。
本公开实施例提供的技术方案中,一方面,通过固定位置的音圈电机来控制终端的摄像头模组获取目标设备的虚像,进而根据虚像的图像参数来对目标设备的虚像距进行控制,以使目标设备的虚像距保持一致。其中,利用终端的摄像头模组焦距可调的特点,对目标设备的虚像距进行标定,能够准确得到目标设备的虚像距,且可以保证全视场图像清晰,均匀性好,提高图像质量。另一方面,终端的手机摄像头模组的音圈电机具有较大调节范围,基于该音圈电机来控制终端的摄像头模组,可以对不同规格的目标设备进行标定,避免了局限性,能够对所有类型和所有规格的目标设备的虚像距进行标定,增加了通用性和应用范围。
接下来,结合附图对本公开实施例中的虚像距控制方法进行详细说明。
在步骤S310中,对终端的摄像头模组进行标定,以固定终端的摄像头模组中的音圈电机的位置。
本公开实施例中,终端可以为任意具有拍摄功能的智能终端,例如可以为智能手机或者是平板电脑等,此处以智能手机为例进行说明。其中,该终端可以具有一个摄像头模组或多个摄像头模组,此处不做限定。
VCM(Voice Coil Motor,音圈电机),是马达的一种,其具有高频响、高精度的特点。音圈电机的主要原理是在一个永久磁场内,通过改变马达内线圈的直流电流大小,来控制弹簧片的拉伸位置,从而带动上下运动。当终端为智能手机时,智能手机的摄像头模组中均要使用音圈电机,以通过音圈电机来调节摄像头模组中镜头(透镜)的位置以改变焦距,从而使通过摄像头模组拍摄的图像或摄像呈现最清晰的状态,提高摄像质量。基于此,智能手机的摄像头模组可以通过音圈电机来进行控制。
在使用音圈电机对摄像头模组进行控制之前,首先可以对终端的摄像头模组进行标定。此处的标定指的是确定摄像头模组的位置。对终端的摄像头模组进行标定的过程可以为:根据目标设备的虚像距,通过智能终端的摄像头模组中的音圈电机控制摄像头模组对该虚像距的物体进行清晰成像,从而固定音圈电机的位置以及智能手机的摄像头模组的位置。
虚像距的定义如下:光机投影至目标设备的镜片,由镜片反射至人眼,在人眼前方生成一个虚像,这个虚像与眼前的实物融为一体,达到增强现实的作用。因此,定义人眼到镜片的距离为D1,镜片到所成虚像的距离为D2,那么目标设备所成虚像的虚像距即为D1与D2之和。需要说明的是,对于不同规格的目标设备而言,其对应的虚像距也不同。例如,虚像距可以为0.3米、2米、3米等等。
虚像距的测试原理为:通过相机模组模拟人眼,将增强现实设备或虚拟现实设备所成的虚像视为相机的被拍物体,相机的成像传感器到相机镜头的距离为第一距离,相机镜头的表面到将增强现实设备或虚拟现实设备所成虚像的距离为第二距离。在对增强现实设备或虚拟现实设备的虚像距进行测试时,通过调节相机的成像传感器到相机的镜头表面的第一距离,可以调节相机的对焦面的第二距离,这两个距离的对应关系可通过相机标定来获取。通过清晰度识别,判断虚像位置是否在相机的对焦面上,并通过对焦面的第二距离得到增强现实设备或虚拟现实设备的虚像距。
具体地,可根据目标设备的虚像距的距离,确定所述虚像距的距离与所述摄像头模组中的音圈电机的位置之间的对应关系,并根据所述对应关系来确定所述摄像头模组的位置。确定虚像距的距离与音圈电机的位置之间的关系也可以理解为建立清晰度与音圈电机之间的对应关系。例如,目标设备的虚像距为2米,则表明只有音圈电机处于2米处的图像清晰度最高,而其他位置处的图像并不是最高清晰度。由此可见,虚像距的距离即对应图像清晰度最高的摄像头模组中音圈电机的位置。通过上述步骤,可以确定音圈电机的位置,同时确定终端的摄像头模组的位置,以对终端的摄像头位置进行固定。
图4中示意性示出了摄像头模组标定的原理图,参考图4中所示,根据目标设备的虚像距(例如2米),通过智能手机的摄像头模组401中的音圈电机控制摄像头模组401来该距离的物体402进行清晰成像,以固定音圈电机的位置,实现摄像头模组的标定过程。
接下来,继续参考图3中所示,在步骤S320中,基于所述位置的音圈电机控制所述终端的摄像头模组获取目标设备的虚像,并根据所述虚像的图像参数对所述目标设备的虚像距进行控制,以使所述目标设备中的虚像距保持一致。
本公开实施例中,目标设备可以为各种类型的增强现实设备或者是虚拟现实设备,且该增强现实设备和虚拟现实设备可以为双目摄像头。举例而言,当目标设备为增强现实设备时,该增强现实设备可以为双目AR(Augmented Reality,增强现实)眼镜或者是双目AR头盔等等。当目标设备为虚拟现实设备时,该增强现实设备可以为双目VR眼镜或者是双目VR头盔等等。
双目摄像头的原理与人眼相似。人眼能够感知物体的远近,是由于两只眼睛对同一个物体呈现的图像存在差异,也称视差。物体距离越远,视差越小;反之,视差越大。对于双目AR设备而言,一般要求两个摄像头模组的虚像距基本一致,以避免一只眼睛看到的虚像距和另一只眼睛看到的虚像距不一致而导致的显示质量差以及用户体验不好的问题。因此,需要对目标设备的虚像距进行控制,以使其保持一致。
由于终端的摄像头模组的位置已经固定,因此可以基于该位置的音圈电机,来控制该固定位置的摄像头模组采集目标设备中的虚像,进而根据虚像的图像参数来对目标设备进行控制和测试。
在使用终端的摄像头模组进行虚像距标定的过程中,首先需要控制目标设模组的出瞳位置与终端的摄像头模组的入瞳位置重合,以得到二者之间的相对位置关系。出瞳指的是光学系统的孔径光阑在光学系统像空间所成的像。出瞳位置可以用出瞳距离来表示,其代表了出射光束的位置。入瞳是限制入射光束的有效孔径,是孔径光阑对前方光学系统所成的像。入瞳的位置可以用入瞳距离来表示,其代表了入射光束的位置。孔径光阑是限制轴上点成像光束孔径角的光孔。一般而言,人眼的瞳孔限制的成像光束的立体角,为孔径光阑。通过控制目标设备的出瞳位置与终端的摄像头模组的入瞳位置相同,能够避免误差,提高准确性。
在控制目标设备的出瞳位置与终端的摄像头模组的位置重合后,可以使用终端的摄像头模组来拍摄目标设备的摄像头模组中的虚像。在此过程中,可以将终端的摄像头模组当做人的眼睛,以通过终端的摄像头模组来对目标设备进行虚像距测试,实现对目标设备的虚像距进行控制标定的功能。
具体地,可以基于位置固定的终端的摄像头模组来采集和拍摄目标设备的虚像。与此同时可以确定拍摄的目标设备的虚像的图像参数。此处的图像参数可以为虚像的清晰度,除此之外也可以为其他合适的参数,此处不做特殊限定。进一步地,可以基于终端的摄像头模组拍摄的目标设备的虚像的清晰度来对目标设备进行控制。
图5中示意性示出了对目标设备的虚像距进行控制的流程图,参考图5中所示,主要包括以下步骤:
在步骤S510中,判断终端的摄像头模组拍摄的目标设备的虚像的清晰度是否满足清晰度条件。若是,则转至步骤S520;若否,则转至步骤S530。其中,清晰度条件可以用最高清晰度来衡量。
在步骤S520中,若所述目标设备的虚像的清晰度满足清晰度条件,则对所述目标设备进行标定。
本步骤中,可以设置一个最高清晰度,并将拍摄的清晰度与该最高清晰度进行对比。如果对比结果表示拍摄的目标设备虚像的清晰度为最高清晰度,则无需对目标设备的虚像距进行调整,从而直接确定目标设备的虚像距,并对目标设备进行标定。在这种情况下,可以认为测试完成。
在步骤S530中,若所述目标设备的虚像的清晰度不满足所述清晰度条件,则对所述目标设备的位置进行调整,直至所述清晰度满足所述清晰度条件为止。
本步骤中,清晰度不满足清晰度条件指的是获取的清晰度小于设置的最高清晰度。如果对比结果表示目标设备的虚像的清晰度不满足清晰度条件,则需要对目标设备的位置进行调整,并将调整后的清晰度与最高清晰度进行对比,直至调整后的清晰度满足清晰度条件为止,停止调整目标设备的位置而将其固定。进一步地,可以根据最高清晰度时的位置确定目标设备的虚像距。
具体地,对目标设备进行调整时,可以通过对所述目标设备的后焦进行调整,直至通过所述摄像头模组中显示的目标设备的虚像满足所述清晰度条件为止。其中,后焦指的是目标设备的显示屏与光学镜头之间的距离。通过调整二者的距离来调整后焦,从而实现对目标设备的调整。此处的光学镜头可以为光学系统最后一片镜(即远离终端的摄像头模组的最后一片镜)。具体地,可以通过调整目标设备上的结构部件(来调整通过目标设备的光学镜头与显示屏之间的距离所代表的后焦,直至摄像头模组中显示的目标设备的虚像满足上述的清晰度条件为止,结构部件例如可以为连接件、支撑件等用于将不同部件组合在一起的部件。通过调整目标设备的后焦,在提高虚像的清晰度的同时,准确地对目标设备进行调整,因此能够准确地定标虚拟现实设备或增强现实设备的虚像距,提高准确性。
图6中示意性示出了调节目标设备的虚像距的示意图,参考图6中所示,工作的时候,将AR或VR模组602出瞳位置与手机摄像头601入瞳位置重合,这时手机摄像头中可以拍摄AR或VR模组的虚像,调节模组的显示器与光学系统最后一片镜的距离(即出瞳距离),使虚像最清晰,此时就可以认为虚像距调节到位。
需要说明的是,本公开实施例中,使用终端的摄像头模组来对目标设备的虚像距进行控制和测量,由于手机摄像头具有视场角足够大,音圈电机VCM控制比较方便等特点。同时手机摄像头也存在手机镜头焦距较短、景深较大等缺点。图7中示意性示出了某一个手机摄像头理论景深值。从图7中可以看出:手机摄像模组在近焦位置景深较小,远焦位置景深较大。由于人眼有较大的调节能力,因此在这个误差范围是符合标准的。因此,使用手机摄像头来进行目标设备的虚像距测试是可行的。
综上所述,本公开实施例中的方法,通过手机摄像头来进行虚像距标定,相比于相关技术中利用长焦镜头进行虚像距标定,手机摄像头视场角足够大,可以观察全视场,能够保证AR或VR产品等目标设备的整个视场的成像品质,提高成像质量。并且,利用手机摄像头焦距可调的特点对AR或VR产品的虚像距进行标定,可以保证全视场图像清晰,均匀性好。另外,手机摄像头的音圈电机VCM具有较大调节范围,可以对不同规格的目标设备进行虚像距标定,提高了通用性和应用范围。手机摄像头光澜前置,与人眼结构类似,使用手机摄像头对目标设备进行虚像距调节,更加符合人眼实际的视觉效果,增加了真实性。
应当注意,尽管在附图中以特定顺序描述了本公开中方法的各个步骤,但是,这并非要求或者暗示必须按照该特定顺序来执行这些步骤,或是必须执行全部所示的步骤才能实现期望的结果。附加的或备选的,可以省略某些步骤,将多个步骤合并为一个步骤执行,以及/或者将一个步骤分解为多个步骤执行等。
图8示意性示出了本公开的示例性实施方式的虚像距控制装置的方框图。参考图8所示,根据本公开的示例性实施方式的虚像距控制装置800可以包括以下模块:
位置标定模块801,用于对终端的摄像头模组进行标定,以固定终端的摄像头模组中的音圈电机的位置;
虚像距确定模块802,用于基于所述位置的音圈电机控制所述终端的摄像头模组获取目标设备的虚像,并根据所述虚像的图像参数对所述目标设备的虚像距进行控制,以使所述目标设备中的虚像距保持一致。
在本公开的一种示例性实施例中,位置标定模块包括:对应关系确定模块,用于根据目标设备的虚像距的距离,确定所述虚像距的距离与所述摄像头模组中的音圈电机的位置之间的对应关系。
在本公开的一种示例性实施例中,虚像距确定模块包括:第一标定模块,用于若通过所述摄像头模组拍摄的所述目标设备的虚像的清晰度满足清晰度条件,则对所述目标设备进行标定;第二标定模块,用于若所述目标设备的虚像的清晰度不满足所述清晰度条件,则对所述目标设备的位置进行调整,直至所述清晰度满足所述清晰度条件为止。
在本公开的一种示例性实施例中,第二标定模块包括:后焦调整模块,用于对所述目标设备的后焦进行调整,直至所述摄像头模组中显示的目标设备的虚像的清晰度满足所述清晰度条件为止。
在本公开的一种示例性实施例中,后焦调整模块被配置为:通过控制所述目标设备的结构部件,对所述目标设备的光学镜头与显示屏之间的距离进行调整,以对所述目标设备的后焦进行调整。
在本公开的一种示例性实施例中,所述目标设备的出瞳位置与所述终端的摄像头模组的入瞳位置重合。
在本公开的一种示例性实施例中,所述目标设备为虚拟现实设备或增强现实设备。
需要说明的是,由于本公开实施方式的虚像距控制装置的各个功能模块与上述虚像距控制方法的实施方式中相同,因此在此不再赘述。
本公开实施例中,还提供了一种虚像距控制系统,参考图9中所示,该虚像距控制系统900主要包括:
目标设备901;以及
终端的摄像头模组902,用于采集所述目标设备中的虚像,并根据所述虚像的图像参数对所述目标设备的虚像距进行控制。
其中,终端的摄像头模组可以设置于目标设备的入射光路上,相当于人眼。具体控制虚像距的过程已经在步骤S310和步骤S320中进行了详细描述,此处不再赘述。
通过以上的实施方式的描述,本领域的技术人员易于理解,这里描述的示例实施方式可以通过软件实现,也可以通过软件结合必要的硬件的方式来实现。因此,根据本公开实施方式的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM,U盘,移动硬盘等)中或网络上,包括若干指令以使得一台计算设备(可以是个人计算机、服务器、终端装置、或者网络设备等)执行根据本公开实施方式的方法。
此外,上述附图仅是根据本公开示例性实施例的方法所包括的处理的示意性说明,而不是限制目的。易于理解,上述附图所示的处理并不表明或限制这些处理的时间顺序。另外,也易于理解,这些处理可以是例如在多个模块中同步或异步执行的。
应当注意,尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元,但是这种划分并非强制性的。实际上,根据本公开的实施方式,上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之,上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。
本领域技术人员在考虑说明书及实践这里公开的内容后,将容易想到本公开的其他实施例。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限。
Claims (10)
1.一种虚像距控制方法,其特征在于,包括:
对终端的摄像头模组进行标定,以固定终端的摄像头模组中的音圈电机的位置;
基于所述位置的音圈电机控制所述终端的摄像头模组获取目标设备的虚像,并根据所述虚像的图像参数对所述目标设备的虚像距进行控制,以使所述目标设备中的虚像距保持一致。
2.根据权利要求1所述的虚像距控制方法,其特征在于,所述对终端的摄像头模组进行标定,包括:
根据目标设备的虚像距的距离,确定所述虚像距的距离与所述摄像头模组中的音圈电机的位置之间的对应关系。
3.根据权利要求1所述的虚像距控制方法,其特征在于,所述根据所述虚像的图像参数对所述目标设备的虚像距进行控制,包括:
若通过所述摄像头模组拍摄的所述目标设备的虚像的清晰度满足清晰度条件,则对所述目标设备进行标定;
若所述目标设备的虚像的清晰度不满足所述清晰度条件,则对所述目标设备的位置进行调整,直至所述清晰度满足所述清晰度条件为止。
4.根据权利要求3所述的虚像距控制方法,其特征在于,所述对所述目标设备的位置进行调整,直至所述清晰度满足所述清晰度条件为止,包括:
对所述目标设备的后焦进行调整,直至所述摄像头模组中显示的目标设备的虚像的清晰度满足所述清晰度条件为止。
5.根据权利要求4所述的虚像距控制方法,其特征在于,所述对所述目标设备的后焦进行调整,包括:
通过控制所述目标设备的结构部件,对所述目标设备的光学镜头与显示屏之间的距离进行调整,以对所述目标设备的后焦进行调整。
6.根据权利要求1所述的虚像距控制方法,其特征在于,所述目标设备的出瞳位置与所述终端的摄像头模组的入瞳位置重合。
7.根据权利要求1-6任意一项所述的虚像距控制方法,其特征在于,所述目标设备为虚拟现实设备或增强现实设备。
8.一种虚像距控制装置,其特征在于,包括:
位置标定模块,用于对终端的摄像头模组进行标定,以固定终端的摄像头模组中的音圈电机的位置;
虚像距确定模块,用于基于所述位置的音圈电机控制所述终端的摄像头模组获取目标设备的虚像,并根据所述虚像的图像参数对所述目标设备的虚像距进行控制,以使所述目标设备中的虚像距保持一致。
9.一种虚像距控制系统,其特征在于,包括:
目标设备;
终端的摄像头模组,用于采集所述目标设备中的虚像,并根据所述虚像的图像参数对所述目标设备的虚像距进行控制。
10.一种电子设备,其特征在于,包括:
处理器;以及
存储器,用于存储所述处理器的可执行指令;
其中,所述处理器配置为经由执行所述可执行指令来执行权利要求1-7任意一项所述的虚像距控制方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010864972.0A CN111986269A (zh) | 2020-08-25 | 2020-08-25 | 虚像距控制方法、装置及系统、电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010864972.0A CN111986269A (zh) | 2020-08-25 | 2020-08-25 | 虚像距控制方法、装置及系统、电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111986269A true CN111986269A (zh) | 2020-11-24 |
Family
ID=73443508
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010864972.0A Pending CN111986269A (zh) | 2020-08-25 | 2020-08-25 | 虚像距控制方法、装置及系统、电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111986269A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114593688A (zh) * | 2022-03-03 | 2022-06-07 | 惠州Tcl移动通信有限公司 | 基于ar眼镜的三维测量方法、装置、ar眼镜及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104931957A (zh) * | 2015-06-01 | 2015-09-23 | 广东欧珀移动通信有限公司 | 一种基于移动终端的测距方法和装置 |
CN107101808A (zh) * | 2017-06-27 | 2017-08-29 | 歌尔科技有限公司 | 采用相机确定透镜后焦距的方法、装置及虚拟现实头戴设备 |
CN108012147A (zh) * | 2017-12-22 | 2018-05-08 | 歌尔股份有限公司 | Ar成像系统虚像距测试方法及装置 |
CN111163313A (zh) * | 2020-04-01 | 2020-05-15 | 支付宝(杭州)信息技术有限公司 | 一种对包含音圈电机的镜头模组进行标定的方法及装置 |
CN111263075A (zh) * | 2020-04-01 | 2020-06-09 | 支付宝(杭州)信息技术有限公司 | 对包含音圈电机的镜头模组进行标定的方法、装置及设备 |
-
2020
- 2020-08-25 CN CN202010864972.0A patent/CN111986269A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104931957A (zh) * | 2015-06-01 | 2015-09-23 | 广东欧珀移动通信有限公司 | 一种基于移动终端的测距方法和装置 |
CN107101808A (zh) * | 2017-06-27 | 2017-08-29 | 歌尔科技有限公司 | 采用相机确定透镜后焦距的方法、装置及虚拟现实头戴设备 |
CN108012147A (zh) * | 2017-12-22 | 2018-05-08 | 歌尔股份有限公司 | Ar成像系统虚像距测试方法及装置 |
CN111163313A (zh) * | 2020-04-01 | 2020-05-15 | 支付宝(杭州)信息技术有限公司 | 一种对包含音圈电机的镜头模组进行标定的方法及装置 |
CN111263075A (zh) * | 2020-04-01 | 2020-06-09 | 支付宝(杭州)信息技术有限公司 | 对包含音圈电机的镜头模组进行标定的方法、装置及设备 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114593688A (zh) * | 2022-03-03 | 2022-06-07 | 惠州Tcl移动通信有限公司 | 基于ar眼镜的三维测量方法、装置、ar眼镜及存储介质 |
CN114593688B (zh) * | 2022-03-03 | 2023-10-03 | 惠州Tcl移动通信有限公司 | 基于ar眼镜的三维测量方法、装置、ar眼镜及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111885305B (zh) | 预览画面处理方法及装置、存储介质和电子设备 | |
US20200359158A1 (en) | Audio Spatialization and Reinforcement Between Multiple Headsets | |
CN111917980B (zh) | 拍照控制方法及装置、存储介质和电子设备 | |
US10932083B2 (en) | Individualization of head related transfer function templates for presentation of audio content | |
CN108833795B (zh) | 一种图像获取设备的对焦方法及装置 | |
CN111010560B (zh) | 一种头戴显示设备的反畸变调节方法、装置和虚拟现实系统 | |
CN111161176B (zh) | 图像处理方法及装置、存储介质和电子设备 | |
JPWO2017051605A1 (ja) | 撮像システム及び撮像制御方法 | |
KR20170059704A (ko) | 촬영 장치 및 그 동작 방법 | |
CN112165575B (zh) | 图像虚化处理方法及装置、存储介质和电子设备 | |
EP3113071A1 (en) | Method and device for acquiring iris image | |
CN112351209B (zh) | 用于移动终端的外置镜头、控制镜头的方法、移动终端及存储介质 | |
RU2635873C2 (ru) | Способ и устройство для отображения информации кадрирования | |
WO2022227893A1 (zh) | 图像拍摄方法、装置、终端及存储介质 | |
CN111986269A (zh) | 虚像距控制方法、装置及系统、电子设备 | |
CN113709353B (zh) | 图像采集方法和设备 | |
CN106483740B (zh) | 投影仪对焦方法及装置 | |
CN111982293B (zh) | 体温测量方法、装置、电子设备及存储介质 | |
CN111127539B (zh) | 视差确定方法、装置、计算机设备及存储介质 | |
CN112291472B (zh) | 预览图像处理方法及装置、存储介质和电子设备 | |
JP2018157314A (ja) | 情報処理システム、情報処理方法及びプログラム | |
CN111757005A (zh) | 拍摄控制方法及装置、计算机可读介质和电子设备 | |
CN106791425B (zh) | 一种提示用户最佳成像距离的提示系统及方法、手机 | |
CN113395439A (zh) | 虚像距离测量方法、系统、装置及终端设备 | |
CN111829651A (zh) | 光强值的校准方法、装置、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |