CN116184746A - 摄像装置、基于摄像装置的图像采集方法及相关产品 - Google Patents
摄像装置、基于摄像装置的图像采集方法及相关产品 Download PDFInfo
- Publication number
- CN116184746A CN116184746A CN202211627856.2A CN202211627856A CN116184746A CN 116184746 A CN116184746 A CN 116184746A CN 202211627856 A CN202211627856 A CN 202211627856A CN 116184746 A CN116184746 A CN 116184746A
- Authority
- CN
- China
- Prior art keywords
- light
- ambient light
- reflecting mirror
- mirror
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B17/00—Details of cameras or camera bodies; Accessories therefor
- G03B17/02—Bodies
- G03B17/17—Bodies with reflectors arranged in beam forming the photographic image, e.g. for reducing dimensions of camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B26/00—Optical devices or arrangements for the control of light using movable or deformable optical elements
- G02B26/08—Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light
- G02B26/0816—Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light by means of one or more reflecting elements
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Cameras In General (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
Abstract
本申请实施例公开摄像装置、基于摄像装置的图像采集方法及相关产品,摄像装置包括:朝向相反的第一摄像镜头和第二摄像镜头;第二反射镜,用于将从第二摄像镜头射入的第二环境光线反射至成像传感器;转动组件,用于转动第一反射镜和透光反射镜;第一反射镜,通过转动改变第二反射镜反射第二环境光线的光路,以及改变从第一摄像镜头射入的第一环境光线的光路;透光反射镜,通过转动改变从第一摄像镜头射入的第一环境光线的光路。因此,射入成像传感器的光线可包括第一环境光线和/或第二环境光线。可见,多个摄像镜头可共用一组光学镜片和成像传感器,有利于减小电子设备的厚度,并且可以在单向取景和双向取景之间切换。
Description
技术领域
本申请涉及光学技术领域,具体涉及摄像装置、基于摄像装置的图像采集方法及相关产品。
背景技术
头戴式显示器广泛应用于虚拟现实(Virtual Reality,VR)、混合现实(MixedReality,MR)、增强现实(Augmented Reality,AR)等场景。部分头戴式显示器可包括多个设置在不同位置的摄像装置,分别用于拍摄不同的景物。与头戴式显示器类似,智能手机、平板电脑等电子设备往往也设置有多个摄像装置。然而,在实践中发现,每个摄像装置都需要对应设置一组成像传感器和镜片模组,容易导致电子设备的厚度增加。
发明内容
本申请实施例公开了摄像装置、基于摄像装置的图像采集方法及相关产品,使得多个摄像镜头可共用一组光学镜片和成像传感器,有利于减小电子设备的厚度。
本申请实施例公开一种摄像装置,所述摄像装置包括:
第一摄像镜头,用于接收第一环境光线;
第二摄像镜头,与所述第一摄像镜头的朝向相反,用于接收第二环境光线;
第二反射镜,用于将从所述第二摄像镜头射入的所述第二环境光线反射至成像传感器;
转动组件,分别与第一反射镜和透光反射镜转动连接,用于根据接收到的转动指令转动所述第一反射镜和所述透光反射镜中的至少一个;
第一反射镜,转动连接于转动组件,用于转动不同角度以改变所述第二反射镜反射所述第二环境光线的光路,以及用于改变从所述第一摄像镜头射入的所述第一环境光线的光路;
所述透光反射镜,转动连接于所述转动组件,用于转动不同角度以改变从所述第一摄像镜头射入的所述第一环境光线的光路;
所述成像传感器,用于根据射入所述成像传感器的光线生成图像;射入所述成像传感器的光线包括所述第一环境光线和/或第二环境光线。
在一个实施例中,当所述第一反射镜转动至所述第二反射镜反射所述第二环境光线的光路上,所述第一反射镜用于将从所述第一摄像镜头射入的所述第一环境光线反射至所述成像传感器,以及用于遮挡所述第二反射镜反射的所述第二环境光线,射入所述成像传感器的光线包括所述第一环境光线;或者,
当所述透光反射镜转动至所述第二反射镜反射所述第二环境光线的光路上,所述透光反射镜用于将从所述第一摄像镜头射入的所述第一环境光线反射至所述成像传感器,以及用于将所述第二反射镜反射的所述第二环境光线透射至所述成像传感器;并且,当所述第一反射镜转动至避开反射所述第二环境光线的光路,以及避开所述透光反射镜反射所述第一环境光线的光路,射入所述成像传感器的光线包括所述第一环境光线和所述第二环境光线;或者,
当所述第一反射镜和所述透光反射镜均转动至避开所述第二反射镜反射所述第二环境光线的光路,所述第一反射镜和所述透光反射镜均用于反射所述第一环境光线,以将所述第一环境光线的光路调整为避开所述成像传感器,射入所述成像传感器的光线包括所述第二环境光线。
本申请实施例公开一种基于摄像装置的图像采集方法,所述摄像装置为前述实施例公开的任一项摄像装置,所述方法包括:
确定所述摄像装置的取景方向;
根据所述取景方向生成转动指令,并将所述转动指令发送至所述转动组件;所述转动指令用于指示所述转动组件将所述第一反射镜和所述透光反射镜转动至与所述取景方向对应的位置,以改变所述第一环境光线和/或所述第二环境光线的光路;
获取所述成像传感器根据射入所述成像传感器的光线生成的图像。
在一个实施例中,所述根据所述取景方向生成转动指令,包括:
当所述取景方向包括向第一方向取景,生成第一转动指令;所述第一转动指令用于指示所述转动组件将所述第一反射镜转动至所述第二反射镜反射所述第二环境光线的光路上;所述第一方向为所述第一摄像镜头的朝向;或者,
当所述取景方向包括同时向所述第一方向和第二方向取景,生成第二转动指令;所述第二转动指令用于指示所述转动组件将所述透光反射镜转动至所述第二反射镜反射所述第二环境光线的光路上,以及将所述第一反射镜转动至避开所述第二反射镜反射所述第二环境光线的光路,并避开所述透光反射镜反射所述第一环境光线的光路;所述第二方向为所述第二摄像镜头的朝向;或者,
当所述取景方向包括向所述第二方向取景,生成第三转动指令;所述第三转动指令用于指示所述转动组件将所述第一反射镜和所述透光反射镜均转动至避开所述第二反射镜反射所述第二环境光线的光路。
在一个实施例中,所述确定所述摄像装置的取景方向,包括:
检测切换取景方向的用户操作;
根据所述用户操作确定所述摄像装置的取景方向。
在一个实施例中,所述第一转动指令还用于指示所述转动组件将所述第一反射镜转动至所述第一反射镜与反射所述第二环境光线的光路之间呈目标角度;或者,所述第二转动指令还用于指示所述转动组件将所述透光反射镜转动至所述透光反射镜与反射所述第二环境光线的光路之间呈目标角度;
所述方法还包括:
当取景方向包括向第一方向取景或同时向第一方向和第二方向取景,确定目标视场;
从至少两个预设角度中确定出与所述目标视场对应的预设角度作为所述目标角度。
在一个实施例中,所述摄像装置应用于头戴式显示器;所述取景方向包括同时向所述第一方向和所述第二方向取景;所述图像包括所述头戴式显示器的佩戴者的眼部以及所述头戴式显示器所处的外部场景;以及,所述方法还包括:
从所述图像中提取出所述眼部的眼部图像数据,并确定所述眼部在所述图像中的图像位置;
根据所述眼部图像数据生成虚拟人像中的虚拟眼部;
将所述虚拟人像融合至所述图像中。
本申请实施例公开一种摄像装置的控制设备,其特征在于,所述摄像装置为前述实施例公开的任一项摄像装置,所述控制设备包括:
取景确定模块,用于确定所述摄像装置的取景方向;
指令处理模块,用于根据所述取景方向生成转动指令,并将所述转动指令发送至所述转动组件;所述转动指令用于指示所述转动组件将所述第一反射镜和所述透光反射镜转动至与所述取景方向对应的位置,以改变所述第一环境光线和/或所述第二环境光线的光路;
图像处理模块,用于获取所述成像传感器根据射入所述成像传感器的光线生成的图像。
本申请实施例公开一种摄像装置的控制设备,包括存储器、处理器以及存储在所述存储器上可以被所述处理器执行的计算机程序,其特征在于,所述处理器执行所述计算机程序时,实现本申请实施例公开的任一项基于摄像装置的图像采集方法中的步骤。
本申请实施例公开一种存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时,本申请实施例公开的任一项基于摄像装置的图像采集方法中的步骤。
与相关技术相比,本申请实施例具有以下有益效果:
转动组件可转动第一反射镜和透光反射镜。当第一反射镜和透光反射镜被转动时可改变第一环境光线和/或第二环境光线的光路,使得第一摄像镜头和第二摄像镜头可共用同一个成像传感器进行成像,有利于减小利用摄像装置进行图像采集的电子设备的厚度。并且,当第一反射镜和透光反射镜被转动时可使得第一环境光线单独射入成像传感器;或者,使得第二环境光线单独射入成像传感器;或者,使得第一环境光线和第二环境光线同时射入成像传感器137。因此,摄像装置还可以分别向第一摄像镜头朝向的第一方向单独成像,向第二摄像镜头朝向的第二方向单独成像,以及向第一方向和第二方向同时成像。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是一个实施例公开的一种摄像装置的结构示意图;
图2A是一个实施例公开的一种光线在摄像装置中传播的示例图;
图2B是一个实施例公开的另一种光线在摄像装置中传播的示例图;
图2C是一个实施例公开的又一种光线在摄像装置中传播的示例图;
图3是一个实施例公开的一种视场范围随第一反射镜的转动而变化的示例图;
图4A是一个实施例公开的一种头戴式显示器的结构示意图;
图4B是另一个实施例公开的一种头戴式显示器的结构示意图;
图5是一个实施例公开的一种基于摄像装置的图像采集方法的应用场景示例图;
图6是一个实施例公开的一种基于摄像装置的图像采集方法的方法流程示意图;
图7是一个实施例公开的一种基于摄像装置的图像采集方法的方法流程示意图;
图8是一个实施例公开的一种摄像装置的控制设备的结构示意图;
图9是一个实施例公开的一种摄像装置的控制设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
需要说明的是,本申请实施例及附图中的术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
本申请实施例公开了摄像装置、基于摄像装置的图像采集方法及相关产品,使得多个摄像镜头可共用一组光学镜片和成像传感器,有利于减小电子设备的厚度。以下分别进行详细说明。
请参阅图1,图1是一个实施例公开的一种摄像装置的结构示意图。如图1所示,摄像装置13可包括:第一摄像镜头131、第二摄像镜头132、第一反射镜133、第二反射镜134、透光反射镜135、转动组件136和成像传感器137。
第一摄像镜头131,用于接收第一环境光线。第一摄像镜头131可以是透光的平面透镜或球面透镜,具体不做限定。
第二摄像镜头132,与第一摄像镜头131的朝向相反,用于接收第二环境光线。第二摄像镜头132的材质与第一摄像镜头131的材质可以相同,也可以不同,具体不做限定。在本申请实施例中,第一摄像镜头131与第二摄像镜头132可错开设置。
第二反射镜134,用于将从第二摄像镜头132射入的第二环境光线反射至成像传感器137。
转动组件136,分别与第一反射镜133和透光反射镜135转动连接,用于根据接收到的转动指令转动第一反射镜133和透光反射镜135中的至少一个。
示例性的,转动组件136可包括转动部和驱动马达。转动部可包括转轴或铰链,第一反射镜133和透光反射镜135可分别与转动组件的转动部连接。例如,转动部可以是分段转轴,第一反光镜133与分段转轴的第一分段连接,透光反射镜135可与分段转轴的第二分段连接。转动组件136可包括两个驱动马达,一个驱动马达连接转动部与第一反射镜133连接的部分,另一个驱动马达连接转动部与透光反射镜135连接的部分。驱动马达可接收转动指令,并根据接收到的转动指令转动,从而带动第一反射镜133或透光反射镜135旋转。
第一反射镜133,转动连接于转动组件136。第一反射镜133和第二反射镜134可以是相同材质的反射镜,也可以是不同材质的反射镜,具体不做限定。示例性的,第一反射镜133和第二反射镜134都可以是平板反射镜。第一反射镜133可用于转动不同角度以改变第二反射镜134反射第二环境光线的光路,以及用于改变从第一摄像镜头131射入的第一环境光线的光路。
透光反射镜135,转动连接于转动组件136。透光反射镜135可以透射光线,也可以反射光线。示例性的,透光反射镜135可以是半透半反射镜,可将入射光能量的一半反射,另一半透射。透光反射镜135,可用于转动不同角度以改变从第一摄像镜头131射入的第一环境光线的光路。
成像传感器137,可以是任意一种感光元件,例如电荷藕合器件图像传感器(Charge Coupled Device,CCD)或者互补性氧化金属半导体(Complementary Metal-OxideSemiconductor,CMOS)等,用于根据射入成像传感器137的光线生成图像。
在本申请实施例中,由于转动组件可转动第一反射镜133和透光反射镜135。当第一反射镜133和透光反射镜135被转动时可改变第一环境光线和/或第二环境光线的光路,使得第一摄像镜头131和第二摄像镜头132可共用同一个成像传感器137进行成像,有利于减小利用摄像装置进行图像采集的电子设备的厚度。并且,当第一反射镜133和透光反射镜135被转动时可改变第一环境光线和/或第二环境光线的光路,使得第一环境光线单独射入成像传感器137;或者,第二环境光线单独射入成像传感器137;或者,第一环境光线和第二环境光线同时射入成像传感器137,使得摄像装置可以分别向第一摄像镜头131朝向的第一方向单独成像,向第二摄像镜头132朝向的第二方向单独成像,以及向第一方向和第二方向同时成像。
在一个实施例中,当第一反射镜133转动至第二反射镜134反射第二环境光线的光路上,第一反射镜133用于将从第一摄像镜头131射入的第一环境光线反射至成像传感器137,以及用于遮挡第二反射镜134反射的第二环境光线,射入成像传感器137的光线包括第一环境光线。
请参阅图2A,图2A是一个实施例公开的一种光线在摄像装置中传播的示例图。如图2A所示,当第一反射镜133与透光反射镜135旋转至如图2A所示的位置时,从第一摄像镜头131射入的第一环境光线被第一反射镜133反射至成像传感器137,从第二摄像镜头132射入的第二环境光线被第二反射镜134反射,但第二反射镜134的反射光线被第一反射镜133遮挡,无法射入成像传感器137。如图2A所示,透光反射镜135避开第二环境光线的反射光路上,并且避开第一反射镜133反射第一环境光线的光路,透光反射镜135不影响第一环境光线和第二环境光线的反射光路,射入成像传感器137的光线可包括第一环境光线,成像传感器137生成的图像可包括第一摄像镜头131朝向的第一方向的信息。
需要说明的是,透光反射镜135还可以转动至第二反射镜134反射第二环境光线的光路上。或者,透光反射镜135也可以转动至第一反射镜133反射第一环境光线的光路上。由于透光反射镜135可透光,即使透光反射镜135在第二环境光线或第一环境光线的反射光路上,也不会遮挡第二环境光线或第一环境光线。
在一个实施例中,当透光反射镜135转动至第二反射镜134反射第二环境光线的光路上,透光反射镜135用于将从第一摄像镜头133射入的第一环境光线反射至成像传感器137,以及用于将第二反射镜134反射的第二环境光线透射至成像传感器137;并且,当第一反射镜133转动至避开第二反射镜134反射第二环境光线的光路,以及避开透光反射镜135反射第一环境光线的光路,射入成像传感137的光线包括第一环境光线和第二环境光线。
请参阅图2B,图2B是一个实施例公开的另一种光线在摄像装置中传播的示例图。如图2B所示,当第一反射镜133与透光反射镜135旋转至如图2B所示的位置时,从第一摄像镜头131射入的第一环境光线被透光反射镜135反射至成像传感器137,从第二摄像摄像镜头132射入的第二环境光线被第二反射镜132反射,第二反射镜132反射的第二环境光线进一步从透光反射镜135透射至成像传感器137。因此,射入成像传感器137的光线可包括第一环境光线和第二环境光线,成像传感器137生成的图像可同时包括第一摄像镜头131和第二摄像镜头132分别朝向的两侧的信息。由于第一反射镜133的不能透光,因此第一反射镜133需要避开第二环境光线和第一环境光线的反射光路。
在一个实施例中,当第一反射镜133和透光反射镜135均转动至避开第二反射镜134反射第二环境光线的光路,第一反射133和透光反射镜135均用于反射第一环境光线,以将第一环境光线的光路调整为避开成像传感器137,射入成像传感器137的光线包括第二环境光线。
请参阅图2C,图2C是一个实施例公开的又一种光线在摄像装置中传播的示例图。如图2C所示,当第一反射镜133与透光反射镜135旋转至如图2C所示的位置时,从第一摄像镜头131射入的第一环境光线无法通过第一反射镜133或透光反射镜135反射至成像传感器137。从第二摄像镜头132射入的第二环境光线经过第二反射镜132的反射,第一反射镜133和透光反射镜135均不处于第二环境光线的反射光路上,因此第二环境光线可以射入成像传感器137,成像传感器137生成的图像可包括第二摄像装置132朝向一侧的信息。
如图2C所示,第一反射镜133可位于透光反射镜135上方(如图2C实线所示);或者,第一反射镜133可位于透光反射镜135下方(如图2C虚线所示)。
在一个实施例中,当第一反射镜133转动至第二反射镜134反射第二环境光线的光路上时,若转动第一反射镜133以改变第一反射镜133在第二环境光线反射光路上的角度,第一环境光线射入第一反射镜133的入射角度相应发生变化,第一环境光线被第一反射镜133反射的光路不同,可分别对应不同的视场范围。
请参阅图3,图3是一个实施例公开的一种视场范围随第一反射镜的转动而变化的示例图。如图3所示,转动第一反射镜133使得第一反射镜133与第二环境光线的反射光路之间的角度逐渐增大,β1<β2<β3。随着第二环境光线的反射光路之间的角度的增大,成像传感器137接收第一环境光线的受光面积减小,视场范围缩小。
在另一实施例中,当透光反射镜135转动至第二反射镜134反射第二环境光线的光路上时,若转动透光反射镜135以改变透光反射镜135在第二环境光线反射光路上的角度时,第一环境光线射入透光反射镜135的入射角度相应发生变化,第一环境光线被透光反射镜135反射的光路不同,可分别对应不同的视场范围。透光反射镜135转动时的视场变化可与图3所示的第一反射镜133转动时的视场变化类似,以下内容不再赘述。
前述实施例公开的摄像装置可应用于头戴式显示器、智能手机、智能平板等任意一种电子设备中。
请参阅图4A,图4A是一个实施例公开的一种头戴式显示器的结构示意图。图4A所示的头戴式显示器包括前述实施例公开的任意一种摄像装置。如图4A所示,头戴式显示器还可包括:透镜11、显示屏幕12。
透镜11,可以覆盖在显示屏幕12之上,用于透过光线。可选的,透镜11可以是凸透镜,可通过折射光线,将显示屏幕12上的画面成像拉近到视网膜位置,使人的眼睛能轻松看清几乎贴在眼前的显示屏;凸透镜还具有聚光作用,聚集头戴式显示器10内部的光线,使得更多光线可以进入摄像装置内部。
显示屏幕12,可以是发光二极管(Light-emitting Diode,LED)屏幕或液晶显示(Liquid Crystal Display,LCD)屏幕,用于输出图像数据。
透镜11和显示屏幕12可设置在头戴式显示器靠近头戴式显示器的佩戴者的一面,以便于佩戴者查看显示屏幕11上输出的图像数据。
如图4A所示,第二摄像镜头132可以设置在头戴式显示器靠近佩戴者的一面,即第二摄像镜头132可与显示屏幕12和透镜11设置在同一侧。相应地,第一摄像镜头131设置在头戴式显示器远离佩戴者的一面。
当头戴式显示器佩戴在人体头部时,第一摄像镜头131可用于接收由头戴式显示器所处的外部场景射入的第一环境光线;第二摄像镜头132可用于接收由头戴式显示器内部射入的第二环境光线。若第一环境光线能够射入成像传感器137,则生成的图像包括头戴式显示器的所处的外部场景;若第二环境光线能够射入成像传感器137,则生成的图像可包括头戴式显示器佩戴者的眼部。此外,当第一反射镜133或透光反射镜135在第二反射镜134反射第二环境光线的光路上时,转动第一反射镜133或透光反射镜135可改变头戴式显示器向外部场景取景的视场范围。
请参阅图4B,图4B是另一个实施例公开的一种头戴式显示器的结构示意图。图4B所示的头戴式显示器包括前述实施例公开的任意一种摄像装置。与图4A所示的头戴式显示器不同的是,在图4B中,第一摄像镜头131设置在头戴式显示器靠近佩戴者的一面,即设置在与头戴式显示器的透镜11和显示屏幕12设置在同一侧。相应地,第二摄像镜头132设置在头戴式显示器远离佩戴者的一面。
当头戴式显示器佩戴在人体头部时,第一摄像镜头131可用于接收由头戴式显示器内部射入的第二环境光线,第二摄像镜头132可用于接收由头戴式显示器所处的外部环境射入的第二环境光线。此外,当第一反射镜133或透光反射镜135在第二反射镜134反射第二环境光线的光路上时,转动第一反射镜133或透光反射镜135可改变头戴式显示器向内部取景的视场范围。
基于前述实施例公开的任意一种摄像装置,本申请实施例公开一种图像采集方法。在对本申请实施例公开的基于摄像装置的图像采集方法进行说明之前,请参阅图5,图5是一个实施例公开的一种基于摄像装置的图像采集方法的应用场景示例图。如图5所示,给出第一种运行环境,该运行环境可以包括头戴式显示器10、终端设备20和服务器30。其中,头戴式显示器10可包括前述实施例公开的任意一种摄像装置。
用户可以佩戴头戴式显示器10以使头戴式显示器10获取数据。这里,头戴式显示器10不具备数据处理能力,其在获取到数据后,可以与终端10之间通过近距离通信技术传输数据。
终端设备10可以包括智能电视、三维视觉显示设备、大型投影系统、多媒体播放设备、手机、平板电脑、游戏主机、PC(Personal Computer,个人计算机)等电子设备。终端设备20可以接收头戴式显示器101传输的数据,对数据进行处理。
服务器30用于为终端设备20提供后台服务,以供终端设备20对接收到的头戴式显示器10传输的数据进行处理,从而完成本申请所提供的基于摄像装置的图像采集方法。可选的,服务器30还可根据数据处理结果生成相对应的控制指令,控制指令可分别发送至终端设备20和/或头戴式显示器10,以对终端设备20和/或头戴式显示器30进行控制。例如,服务器30可以是后台服务器。服务器30可以是一台服务器,也可以是由多台服务器组成的服务器集群,或者是一个云计算服务中心。可选地,服务器30同时为多个终端设备20提供后台服务。
再给出第二种运行环境,该运行环境可以包括头戴式显示器10和终端设备20。
这里,头戴式显示器10可以包括上述所陈述的各种类型的设备,头戴式显示器10不具备数据处理能力,其在获取到数据后,可以与终端设备20之间通过近距离通信技术传输数据。
终端设备20可以包括上述所陈述的各种类型的电子设备。终端设备20可以接收头戴式显示器10传输的数据,对数据进行处理,以完成本申请所提供的基于摄像装置的图像采集方法。可选的,终端设备20还可根据数据处理结果生成相对应的控制指令,控制指令可分别发送头戴式显示器10,以对头戴式显示10进行控制。
再给出第三种运行环境,该运行环境仅包括头戴式显示器10。这里,头戴式显示器10不仅具有数据获取能力,还具有数据处理能力,即能够通过头戴式显示器10中的处理器调用程序代码来实现本申请提供的基于摄像装置的图像采集方法所实现的功能,当然程序代码可以保存在计算机存储介质中,可见,该头戴式显示器至少包括处理器和存储介质。
在前述的三种运行环境中,服务器30、终端设备20和头戴式显示器10可分别作为摄像装置的控制设备,执行本申请所提供的基于摄像装置的图像采集方法。
请参阅图6,图6是一个实施例公开的一种基于摄像装置的图像采集方法的方法流程示意图。如图6所示,该方法可应用于前述运行环境所示的任意一种控制设备,可由控制设备的中央处理器(Central Progressing Unit,CPU)、微控制器(Micro Control Unit,MCU)等处理器执行。如图6所示,该方法可包括以下步骤:
610、确定摄像装置的取景方向。
在本申请实施例中,摄像装置的取景方向可由用户输入,也可由头戴式显示器的控制设备根据当前的程序任务确定。取景方向可包括:向第一方向取景、向第二方向取景或同时向第一方向和第二方向取景。其中,第一方向可以是第一摄像镜头的朝向,第二方向可以是第二摄像镜头的朝向。
作为一种可选的实施方式,摄像装置的取景方向由用户输入:控制设备可检测切换取景方向的用户操作,并根据用户操作确定摄像装置的取景方向。用户操作可以是用户通过语音、手势等方式输入的,具体不做限定。
示例性的,摄像装置可如图4A所示设置在头戴式显示器中,若用户操作为输入语音指令“切换后置摄像头”,则可确定取景方向为第一方向。若用户操作为输入语音指令“切换前置摄像头”,则可确定取景方向为第二方向;若用户操作为输入语音指令“同时拍摄”,则可确定取景方向为第一方向和第二方向。
作为另一种可选的实施方式,摄像装置的取景方向可控制设备根据当前的程序任务确定。示例性的,摄像装置可如图4A所示设置在头戴式显示器中,若当前的程序任务为采集头戴式显示器佩戴者的虹膜图像,以利用虹膜图像对佩戴者的身份进行校验,则可确定摄像装置的取景方向为第二方向。若当前的程序任务为采集外部场景图像,并在头戴式显示器中输出外部场景图像,以避免用户碰撞前方障碍物,则可确定取景方向为第一方向。若当前的程序任务为展示头戴式显示器的双向拍摄功能,则可确定取景方向为第一方向和第二方向。
620、根据取景方向生成转动指令,并将转动指令发送至摄像装置的转动组件。
在本申请实施例中,控制设备在确定取景方向后,可获取第一反射镜和透光反射镜与取景方向对应的位置。其中:
第一反射镜和透光反射镜与向第一方向取景对应的位置,可包括:第一反射镜转动至第二反射镜反射第二环境光线的光路上,透光反射镜可以转动至任一位置。
第一反射镜和透光反射镜与同时向第一方向和第二方向取景对应的位置,可包括:透光反射镜转动至第二反射镜反射第二环境光线的光路上,以及第一反射镜转动至避开反射第二环境光线的光路,以及避开透光反射镜反射第一环境光线的光路。
第一反射镜和透光反射镜与向第二方向取景对应的位置,可包括:第一反射镜和透光反射镜均转动至避开第二反射镜反射第二环境光线的光路。
控制设备在确定取景方向后,还可获取第一反射镜和透光反射镜当前的位置。其中,第一反射镜和透光反射镜的每次转动数据都可存储在存储器中,第一反射镜和透光反射镜当前的位置可以是上一次转动后存储在存储器中的。控制设备可从头戴式显示器、终端设备或后台服务器的存储器中获取存储的第一反射镜和透光反射镜上一次转动后的位置作为二者当前的位置。
控制设备可根据第一反射镜和透光反射镜当前的位置,以及二者与取景方向分别对应的位置,计算第一反射镜对应的转动方向和转动角度,以及计算透光反射镜对应的转动方向和转动角度,并根据第一反射镜和透光反射镜分别对应的转动方向和转动角度生成转动指令。
在一个实施例中,根据取景方向生成转动指令的实施方式可包括:
当取景方向包括向第一方向取景,生成第一转动指令;第一转动指令可用于指示转动组件将第一反射镜和透光反射镜转动至前述的向第一方向取景对应的位置。
在一个实施例中,根据取景方向生成转动指令的实施方式可包括:
当取景方向包括同时向第一方向和第二方向取景,生成第二转动指令;第二转动指令可用于指示转动组件将第一反射镜和透光反射镜转动至前述的同时向第一方向和第二方向取景对应的位置。
在一个实施例中,根据取景方向生成转动指令的实施方式可包括:
当取景方向包括向第二方向取景,生成第三转动指令;第三转动指令用于指示转动组件将第一反射镜和透光反射镜转动至前述的向第二方向取景对应的位置。
在生成转动指令之后,控制设备可进一步将转动指令发送至转动组件。转动组件可根据转动指令转动第一反射镜和透光反射镜中的至少一个。
示例性的,当取景方向为向第二方向取景时,需要将第一反射镜和透光反射镜转动至如图2A所示的位置。若第一反光镜和透光反射镜在转动之前的位置如图2C的实线所示,则可以只转动第一反射镜;否则,需要分别转动第一反射镜和透光反射镜。
630、获取成像传感器根据射入成像传感器的光线生成的图像。
在一个实施例中,摄像装置可如图4A所示设置在头戴式显示器,当取景方向包括向第一方向取景,则获取到的图像可包括头戴式显示器的外部场景。当取景方向包括向第二方向取景,则获取到的图像可包括头戴式显示器佩戴者的眼部,例如可包括虹膜、瞳孔信息、睫毛和眼周肌肉等。当取景方向包括同时向第一方向和第二方向取景,则将获取到的图像可同时包括佩戴者的眼部以及外部场景。
可见,在前述实施例中,基于本申请提供的摄像装置进行图像采集方法,可以在单独向第一方向取景、单独向第二方向取景和同时双向取景之间灵活切换。并且,同时双向取景时可以对两侧同时成像。
在一个实施例中,当取景方向包括同时向第一方向和第二方向取景,则将获取到的图像可同时包括佩戴者的眼部以及外部场景。在获取到同时包括佩戴者眼部和外部场景的图像之后,控制设备还可执行以下步骤:
步骤1:从图像中提取出眼部的眼部图像数据,并确定眼部在图像中的图像位置。其中,控制设备可基于特征提取、机器学习等方式从图像中识别眼部,以提取眼部图像数据并确定眼部的图像位置。眼部图像数据可包括:虹膜颜色、瞳孔中心位置、眼周肌肉走向等,具体不做限定。
步骤2:根据眼部图像数据生成虚拟人像中的虚拟眼部。其中,虚拟人像可以是系统自动生成或者用户自定义的,可以是头戴式显示器的佩戴者在AR、VR或MR场景中的虚拟投射。虚拟人像中的虚拟眼部可根据眼部图像数据进行建模和渲染。
示例性的,虚拟眼部的虹膜颜色与眼部图像数据中虹膜颜色相同,使得虚拟眼睛与佩戴者真实的眼睛更加相似。
示例性的,虚拟眼部的瞳孔中心位置与眼部图像数据中的瞳孔中心位置相同,使得虚拟眼部中瞳孔的转动方向与佩戴者真实的瞳孔转动方向相同。
示例性的,虚拟眼部的眼周肌肉走向与眼部图像数据中的眼周肌肉走向相同,使得虚拟人像的微笑、愤怒等表情可以更加自然。
步骤3:将虚拟人像融合至图像中。其中,可将虚拟面部图像中的虚拟眼部与前述的图像位置对齐,对齐后将虚拟面部图像融合至成像传感器生成的原图中。融合后的图像可包括:头戴式显示器的外部场景以及虚拟人像,从而达到将虚拟人像投射到真实的外部场景中的效果。
并且,基于本申请所提供的摄像装置,头戴式显示器可同时向内部和外部取景成像,生成的图像中可同时包括眼部和外部环境。在融合时,可直接以眼部在图像中的图像位置为基准进行融合。否则,需要先切换摄像装置向内部拍摄,单独对眼部成像,再切换摄像装置向外部拍摄,单独对外部场景成像,然后再分别对得到的两帧图像进行处理。可见,同时向内部和外部取景成像可提高图像处理效率。
请参阅图7,图7是一个实施例公开的一种基于摄像装置的图像采集方法的方法流程示意图。如图7所示,该方法可应用于前述运行环境所示的任意一种控制设备,如图7所示该方法可包括以下步骤:
710、确定摄像装置的取景方向。
720、当取景方向包括向第一方向取景或同时向第一方向和第二方向取景,确定目标视场。
在本申请实施例中,当第一反射镜或透光反射镜在第二反射镜反射第二环境光的光路上时,可通过转动第一反射镜或透光反射镜调整第一环境光线射入成像传感器的角度,调整成像传感器接收第一环境光线的受光面积,从而调整成像传感器在第一方向上的视场范围。因此,在本申请实施例中,摄像装置可以在第一方向上提供至少两个不同范围的视场,可由控制设备控制切换。
目标视场可由用户输入,也可由头戴式显示器的控制设备根据当前的程序任务确定。
730、从至少两个预设角度中确定出与视场范围对应的预设角度作为目标角度。
在本申请实施例中,至少两个预设角度可分别对应不同的视场。
示例性的,至少两个预设角度可包括:第一角度和第二角度。第一角度可对应第一视场,第二角度可对应第二视场,第一视场的视场范围可大于第二视场的视场范围。
当第一反射镜在第二反射镜反射第二环境光的光路上时,转动第一反射镜使得第一反射镜与反射第二环境光线的光路之间呈第一角度,可对应较大的第一视场;转动第一反射镜使得第一反射镜与反射第二环境光线的光路之间呈第二角度,可对应较大的第二视场。
当透光反射镜在第二反射镜反射第二环境光的光路上时,转动光反射镜使得光反射镜与反射第二环境光线的光路之间呈第一角度,可对应较大的第一视场;转动光反射镜使得光反射镜与反射第二环境光线的光路之间呈第二角度,可对应较大的第二视场。
在执行步骤720确定目视场之后,可根据视场与预设角度之间的对应关系,从各个预设角度中确定出与目标视场对应的预设角度作为目标角度。
740、当取景方向为向第一方向取景,根据目标角度生成第一转动指令。
750、当取景方向为向第二方向取景,根据目标角度生成第二转动指令。
760、将第一转动指令或第二转动指令发送至摄像装置的转动组件。
在本申请实施例中,第一转动指令除了用于指示转动组件将第一反射镜转动至第二反射镜反射第二环境光线的光路上以外,还用于指示转动组件将第一反射镜转动至第一反射镜与反射第二环境光线的光路之间呈目标角度,从而使得摄像装置向第一方向取景的视场为目标视场。
第二转动指令除了用于指示转动组件将透光反射镜转动至第二反射镜反射第二环境光线的光路上,以及将第一反射镜转动至避开第二反射镜反射第二环境光线的光路,并避开透光反射镜反射第一环境光线的光路以外,还用于指示转动组件将透光反射镜转动至透光反射镜与反射第二环境光线的光路之间呈目标角度,从而使得摄像装置在同时向第一方向和第二方向取景时,第一方向的视场可以为目标视场。
770、获取成像传感器根据射入成像传感器的光线生成的图像。
可见,在前述实施例中,控制设备可以根据目标视场生成对应的转动指令,以对摄像装置在第一方向上取景的视场进行灵活切换。
应该理解的是,虽然图6或图7的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图6或图7中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
请参阅图8,图8是一个实施例公开的一种摄像装置的控制设备的结构示意图。摄像装置可以为前述实施例公开的任意一种摄像装置,该控制设备可以是前述运行环境所示的终端设备、服务器或头戴式显示器中的任意一种。如图8所示,摄像装置的控制设备800可包括:取景确定模块810、指令处理模块820和图像处理模块830。
取景确定模块810,用于确定摄像装置的取景方向;
指令处理模块820,用于根据取景方向生成转动指令,并将转动指令发送至转动组件;转动指令用于指示转动组件将第一反射镜和透光反射镜转动至与取景方向对应的位置,以改变第一环境光线和/或第二环境光线的光路;
图像处理模块830,用于获取成像传感器根据射入成像传感器的光线生成的图像。
在一个实施例中,指令处理模块820还用于当取景方向包括向第一方向取景,生成第一转动指令;第一转动指令用于指示转动组件将第一反射镜转动至第二反射镜反射第二环境光线的光路上;第一方向为第一摄像镜头的朝向;或者,
指令处理模块820还用于当取景方向包括同时向第一方向和第二方向取景,生成第二转动指令;第二转动指令用于指示转动组件将透光反射镜转动至第二反射镜反射第二环境光线的光路上,以及将第一反射镜转动至避开第二反射镜反射第二环境光线的光路,并避开透光反射镜反射第一环境光线的光路;第二方向为第二摄像镜头的朝向;或者,
指令处理模块820还用于当取景方向包括向第二方向取景,生成第三转动指令;第三转动指令用于指示转动组件将第一反射镜和透光反射镜均转动至避开第二反射镜反射第二环境光线的光路。
在一个实施例中,取景确定模块810可包括:检测单元和确定单元。
检测单元,可用于检测切换取景方向的用户操作;
确定单元,可用于根据切换取景方向的用户操作确定摄像装置的取景方向。
在一个实施例中,基于摄像装置的控制设备800还可包括:
视场确定模块,用于在当取景方向包括向第一方向取景或同时向第一方向和第二方向取景,确定目标视场;
指令处理模块820,还可用于从至少两个预设角度中确定出与目标视场对应的预设角度作为目标角度,并根据目标角度生成第一转动指令或第二转动指令。
在一个实施例中,摄像装置的控制设备800还可包括:
图像处理模块830,还用于从成像传感器生成的图像中提取出眼部的眼部图像数据,并确定眼部在图像中的图像位置;根据眼部图像数据生成虚拟人像中的虚拟眼部;将虚拟人像融合至图像中。
可见,实施本申请提供的摄像装置的控制设备,可以控制前述的摄像装置在单独向第一方向取景、单独向第二方向取景和同时双向取景之间灵活切换。
请参阅图9,图9是一个实施例公开的一种摄像装置的控制设备的结构示意图,该摄像装置的控制设备可以是前述运行环境所示的终端设备、服务设备或者头戴式显示器本体中的任意一种。如图9所示,该摄像装置的控制设备900可以包括:
存储有可执行程序代码的存储器910;
与存储器910耦合的处理器920;
其中,处理器920调用存储器910中存储的可执行程序代码,执行本申请实施例公开的任意一种基于摄像装置的图像采集方法。
本领域技术人员可以理解,图9中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,本申请提供的摄像装置的控制设备可以实现为一种计算机程序的形式,计算机程序可在如图9所示的控制设备上运行。控制设备的存储器中可存储组成该摄像装置的控制设备的各个程序模块,比如,图8所示的取景确定模块810、指令处理模块820和图像处理模块830。各个程序模块构成的计算机程序使得处理器执行本说明书中描述的本申请各个实施例的基于摄像装置的图像采集方法中的步骤。
例如,图9所示的控制设备可以通过如图8所示的摄像装置的控制设备中的取景确定模块810执行确定摄像装置的取景方向的步骤;可通过指令处理模块820执行根据取景方向生成转动指令,并将转动指令发送至转动组件的步骤;可通过图像处理模块830执行获取成像传感器根据射入成像传感器的光线生成的图像的步骤。
在一个实施例中,提供了一种摄像装置的控制设备,包括存储器和处理器,该存储器存储有计算机程序,该处理器执行计算机程序时实现以下步骤:
确定摄像装置的取景方向;
根据取景方向生成转动指令,并将转动指令发送至转动组件;转动指令用于指示转动组件将第一反射镜和透光反射镜转动至与取景方向对应的位置,以改变第一环境光线和/或第二环境光线的光路;
获取成像传感器根据射入成像传感器的光线生成的图像。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
当取景方向包括向第一方向取景,生成第一转动指令;第一转动指令用于指示转动组件将第一反射镜转动至第二反射镜反射第二环境光线的光路上;第一方向为第一摄像镜头的朝向;或者,
当取景方向包括同时向第一方向和第二方向取景,生成第二转动指令;第二转动指令用于指示转动组件将透光反射镜转动至第二反射镜反射第二环境光线的光路上,以及将第一反射镜转动至避开第二反射镜反射第二环境光线的光路,并避开透光反射镜反射第一环境光线的光路;第二方向为第二摄像镜头的朝向;或者,
当取景方向包括向第二方向取景,生成第三转动指令;第三转动指令用于指示转动组件将第一反射镜和透光反射镜均转动至避开第二反射镜反射第二环境光线的光路。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
确定摄像装置的取景方向,包括:
检测切换取景方向的用户操作;
根据用户操作确定摄像装置的取景方向。
在一个实施例中,第一转动指令还用于指示转动组件将第一反射镜转动至第一反射镜与反射第二环境光线的光路之间呈目标角度;或者,第二转动指令还用于指示转动组件将透光反射镜转动至透光反射镜与反射第二环境光线的光路之间呈目标角度;
处理器执行计算机程序时还实现以下步骤:
当取景方向包括向第一方向取景或同时向第一方向和第二方向取景,确定目标视场;
从至少两个预设角度中确定出与目标视场对应的预设角度作为目标角度。
在一个实施例中,摄像装置应用于头戴式显示器;取景方向包括同时向第一方向和第二方向取景;图像包括头戴式显示器的佩戴者的眼部以及头戴式显示器所处的外部场景;处理器执行计算机程序时还实现以下步骤:
从图像中提取出眼部的眼部图像数据,并确定眼部在图像中的图像位置;
根据眼部图像数据生成虚拟人像中的虚拟眼部;
将虚拟人像融合至图像中。
可见,在前述实施例中,摄像装置的控制设备可以在摄像装置单独向第一方向取景、单独向第二方向取景和同时双向取景之间灵活切换。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
确定摄像装置的取景方向;
根据取景方向生成转动指令,并将转动指令发送至转动组件;转动指令用于指示转动组件将第一反射镜和透光反射镜转动至与取景方向对应的位置,以改变第一环境光线和/或第二环境光线的光路;
获取成像传感器根据射入成像传感器的光线生成的图像。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
当取景方向包括向第一方向取景,生成第一转动指令;第一转动指令用于指示转动组件将第一反射镜转动至第二反射镜反射第二环境光线的光路上;第一方向为第一摄像镜头的朝向;或者,
当取景方向包括同时向第一方向和第二方向取景,生成第二转动指令;第二转动指令用于指示转动组件将透光反射镜转动至第二反射镜反射第二环境光线的光路上,以及将第一反射镜转动至避开第二反射镜反射第二环境光线的光路,并避开透光反射镜反射第一环境光线的光路;第二方向为第二摄像镜头的朝向;或者,
当取景方向包括向第二方向取景,生成第三转动指令;第三转动指令用于指示转动组件将第一反射镜和透光反射镜均转动至避开第二反射镜反射第二环境光线的光路。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
确定摄像装置的取景方向,包括:
检测切换取景方向的用户操作;
根据用户操作确定摄像装置的取景方向。
在一个实施例中,第一转动指令还用于指示转动组件将第一反射镜转动至第一反射镜与反射第二环境光线的光路之间呈目标角度;或者,第二转动指令还用于指示转动组件将透光反射镜转动至透光反射镜与反射第二环境光线的光路之间呈目标角度;
计算机程序被处理器执行时还实现以下步骤:
当取景方向包括向第一方向取景或同时向第一方向和第二方向取景,确定目标视场;
从至少两个预设角度中确定出与目标视场对应的预设角度作为目标角度。
在一个实施例中,摄像装置应用于头戴式显示器;取景方向包括同时向第一方向和第二方向取景;图像包括头戴式显示器的佩戴者的眼部以及头戴式显示器所处的外部场景;计算机程序被处理器执行时还实现以下步骤:
从图像中提取出眼部的眼部图像数据,并确定眼部在图像中的图像位置;
根据眼部图像数据生成虚拟人像中的虚拟眼部;
将虚拟人像融合至图像中。
可见,在前述实施例中,计算机程序被处理器执行时,可以在摄像装置单独向第一方向取景、单独向第二方向取景和同时双向取景之间灵活切换。
应理解,说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本申请的至少一个实施例中。因此,在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外,这些特定特征、结构或特性可以以任意适合的方式结合在一个或多个实施例中。本领域技术人员也应该知悉,说明书中所描述的实施例均属于可选实施例,所涉及的动作和模块并不一定是本申请所必须的。
在本申请的各种实施例中,应理解,上述各过程的序号的大小并不意味着执行顺序的必然先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物单元,即可位于一个地方,或者也可以分布到多个网络单元上。可根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本申请各实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
上述集成的单元若以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可获取的存储器中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或者部分,可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干请求用以使得一台计算机设备(可以为个人计算机、服务器或者网络设备等,具体可以是计算机设备中的处理器)执行本申请的各个实施例上述方法的部分或全部步骤。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质包括只读存储器(Read-Only Memory,ROM)、随机存储器(Random Access Memory,RAM)、可编程只读存储器(Programmable Read-only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory,EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory,OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory,EEPROM)、只读光盘(CompactDisc Read-Only Memory,CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
以上对本申请实施例公开的一种摄像装置、基于摄像装置的图像采集方法及相关产品进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想。同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。
Claims (10)
1.一种摄像装置,其特征在于,所述摄像装置包括:
第一摄像镜头,用于接收第一环境光线;
第二摄像镜头,与所述第一摄像镜头的朝向相反,用于接收第二环境光线;
第二反射镜,用于将从所述第二摄像镜头射入的所述第二环境光线反射至成像传感器;
转动组件,分别与第一反射镜和透光反射镜转动连接,用于根据接收到的转动指令转动所述第一反射镜和所述透光反射镜中的至少一个;
第一反射镜,转动连接于转动组件,用于转动不同角度以改变所述第二反射镜反射所述第二环境光线的光路,以及用于改变从所述第一摄像镜头射入的所述第一环境光线的光路;
所述透光反射镜,转动连接于所述转动组件,用于转动不同角度以改变从所述第一摄像镜头射入的所述第一环境光线的光路;
所述成像传感器,用于根据射入所述成像传感器的光线生成图像;射入所述成像传感器的光线包括所述第一环境光线和/或第二环境光线。
2.根据权利要求1所述的摄像装置,其特征在于,
当所述第一反射镜转动至所述第二反射镜反射所述第二环境光线的光路上,所述第一反射镜用于将从所述第一摄像镜头射入的所述第一环境光线反射至所述成像传感器,以及用于遮挡所述第二反射镜反射的所述第二环境光线,射入所述成像传感器的光线包括所述第一环境光线;或者,
当所述透光反射镜转动至所述第二反射镜反射所述第二环境光线的光路上,所述透光反射镜用于将从所述第一摄像镜头射入的所述第一环境光线反射至所述成像传感器,以及用于将所述第二反射镜反射的所述第二环境光线透射至所述成像传感器;并且,当所述第一反射镜转动至避开反射所述第二环境光线的光路,以及避开所述透光反射镜反射所述第一环境光线的光路,射入所述成像传感器的光线包括所述第一环境光线和所述第二环境光线;或者,
当所述第一反射镜和所述透光反射镜均转动至避开所述第二反射镜反射所述第二环境光线的光路,所述第一反射镜和所述透光反射镜均用于反射所述第一环境光线,以将所述第一环境光线的光路调整为避开所述成像传感器,射入所述成像传感器的光线包括所述第二环境光线。
3.一种基于摄像装置的图像采集方法,其特征在于,所述摄像装置为权利要求1或2所述的摄像装置,所述方法包括:
确定所述摄像装置的取景方向;
根据所述取景方向生成转动指令,并将所述转动指令发送至所述转动组件;所述转动指令用于指示所述转动组件将所述第一反射镜和所述透光反射镜转动至与所述取景方向对应的位置,以改变所述第一环境光线和/或所述第二环境光线的光路;
获取所述成像传感器根据射入所述成像传感器的光线生成的图像。
4.根据权利要求3所述的方法,其特征在于,所述根据所述取景方向生成转动指令,包括:
当所述取景方向包括向第一方向取景,生成第一转动指令;所述第一转动指令用于指示所述转动组件将所述第一反射镜转动至所述第二反射镜反射所述第二环境光线的光路上;所述第一方向为所述第一摄像镜头的朝向;或者,
当所述取景方向包括同时向所述第一方向和第二方向取景,生成第二转动指令;所述第二转动指令用于指示所述转动组件将所述透光反射镜转动至所述第二反射镜反射所述第二环境光线的光路上,以及将所述第一反射镜转动至避开所述第二反射镜反射所述第二环境光线的光路,并避开所述透光反射镜反射所述第一环境光线的光路;所述第二方向为所述第二摄像镜头的朝向;或者,
当所述取景方向包括向所述第二方向取景,生成第三转动指令;所述第三转动指令用于指示所述转动组件将所述第一反射镜和所述透光反射镜均转动至避开所述第二反射镜反射所述第二环境光线的光路。
5.根据权利要求4所述的方法,其特征在于,所述确定所述摄像装置的取景方向,包括:
检测切换取景方向的用户操作;
根据所述用户操作确定所述摄像装置的取景方向。
6.根据权利要求4所述的方法,其特征在于,所述第一转动指令,还用于指示所述转动组件将所述第一反射镜转动至所述第一反射镜与反射所述第二环境光线的光路之间呈目标角度;或者,所述第二转动指令,还用于指示所述转动组件将所述透光反射镜转动至所述透光反射镜与反射所述第二环境光线的光路之间呈目标角度;
所述方法还包括:
当取景方向包括向第一方向取景或同时向第一方向和第二方向取景,确定目标视场;
从至少两个预设角度中确定出与所述目标视场对应的预设角度作为所述目标角度。
7.根据权利要求4所述的方法,其特征在于,所述摄像装置应用于头戴式显示器;所述取景方向包括同时向所述第一方向和所述第二方向取景;所述图像包括所述头戴式显示器的佩戴者的眼部以及所述头戴式显示器所处的外部场景;以及,所述方法还包括:
从所述图像中提取出所述眼部的眼部图像数据,并确定所述眼部在所述图像中的图像位置;
根据所述眼部图像数据生成虚拟人像中的虚拟眼部;
将所述虚拟人像融合至所述图像中。
8.一种摄像装置的控制设备,其特征在于,所述摄像装置为权利要求1或2所述的摄像装置,所述控制设备包括:
取景确定模块,用于确定所述摄像装置的取景方向;
指令处理模块,用于根据所述取景方向生成转动指令,并将所述转动指令发送至所述转动组件;所述转动指令用于指示所述转动组件将所述第一反射镜和所述透光反射镜转动至与所述取景方向对应的位置,以改变所述第一环境光线和/或所述第二环境光线的光路;
图像处理模块,用于获取所述成像传感器根据射入所述成像传感器的光线生成的图像。
9.一种摄像装置的控制设备,包括存储器、处理器以及存储在所述存储器上可以被所述处理器执行的计算机程序,其特征在于,所述处理器执行所述计算机程序时,实现权利要求3-7任一项所述方法中的步骤。
10.一种存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时,实现实现权利要求3-7任一项所述方法中的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211627856.2A CN116184746A (zh) | 2022-12-16 | 2022-12-16 | 摄像装置、基于摄像装置的图像采集方法及相关产品 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211627856.2A CN116184746A (zh) | 2022-12-16 | 2022-12-16 | 摄像装置、基于摄像装置的图像采集方法及相关产品 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116184746A true CN116184746A (zh) | 2023-05-30 |
Family
ID=86441243
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211627856.2A Pending CN116184746A (zh) | 2022-12-16 | 2022-12-16 | 摄像装置、基于摄像装置的图像采集方法及相关产品 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116184746A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116708983A (zh) * | 2023-08-03 | 2023-09-05 | 荣耀终端有限公司 | 镜头模组、摄像头模组和电子设备 |
-
2022
- 2022-12-16 CN CN202211627856.2A patent/CN116184746A/zh active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116708983A (zh) * | 2023-08-03 | 2023-09-05 | 荣耀终端有限公司 | 镜头模组、摄像头模组和电子设备 |
CN116708983B (zh) * | 2023-08-03 | 2023-11-21 | 荣耀终端有限公司 | 镜头模组、摄像头模组和电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109639997B (zh) | 图像处理方法、电子装置及介质 | |
CN108885341B (zh) | 基于棱镜的眼睛跟踪 | |
US10044919B2 (en) | Structures and methods for capturing images by a portable electronic device | |
US10095307B2 (en) | Eye tracking systems and methods for virtual reality environments | |
WO2020114067A1 (zh) | 成像方法、成像装置、电子装置及介质 | |
US10536634B2 (en) | Multiple lens system and portable electronic device employing the same | |
CN111479065B (zh) | 相机视场角同步方法及装置、图像拍摄方法及装置 | |
US20180052308A1 (en) | Optical lens accessory for wide-angle photography | |
US11030720B2 (en) | Direct retinal projection apparatus and method | |
US11516391B2 (en) | Multiple camera system for wide angle imaging | |
CN115209057B (zh) | 一种拍摄对焦方法及相关电子设备 | |
CN108495016B (zh) | 一种摄像装置、电子设备及获取图像方法 | |
CN116184746A (zh) | 摄像装置、基于摄像装置的图像采集方法及相关产品 | |
WO2014156661A1 (ja) | 表示装置、表示方法及び表示プログラム | |
Akin et al. | Hemispherical multiple camera system for high resolution omni-directional light field imaging | |
CN107430276B (zh) | 头戴式显示设备 | |
CN113810560A (zh) | 摄像头、变焦方法、终端及存储介质 | |
Tsuchiya et al. | An optical design for avatar-user co-axial viewpoint telepresence | |
US20200012069A1 (en) | Structures and Methods for Capturing Images by a Portable Electronic Device with a Linear Movement Switching Mechanism | |
CN115022510A (zh) | 摄像头组件、电子设备及其拍摄方法和拍摄装置 | |
CN115393947A (zh) | 基于头戴式显示器的虹膜图像采集方法及相关产品 | |
CN113874772A (zh) | 一种光学系统、电子设备以及显示装置 | |
CN113965668A (zh) | 光处理装置、相机模组、电子设备、拍摄方法及存储介质 | |
CN109842740A (zh) | 全景摄像机、图像处理系统及图像处理方法 | |
US11972047B1 (en) | Control method and device for near eye display system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |