CN108508620B - 激光投射模组的检测方法、检测装置和电子装置 - Google Patents

激光投射模组的检测方法、检测装置和电子装置 Download PDF

Info

Publication number
CN108508620B
CN108508620B CN201810200489.5A CN201810200489A CN108508620B CN 108508620 B CN108508620 B CN 108508620B CN 201810200489 A CN201810200489 A CN 201810200489A CN 108508620 B CN108508620 B CN 108508620B
Authority
CN
China
Prior art keywords
laser
module
visible light
laser pattern
preset
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810200489.5A
Other languages
English (en)
Other versions
CN108508620A (zh
Inventor
唐城
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201810200489.5A priority Critical patent/CN108508620B/zh
Publication of CN108508620A publication Critical patent/CN108508620A/zh
Priority to EP19725915.3A priority patent/EP3561574A4/en
Priority to PCT/CN2019/076076 priority patent/WO2019174455A1/zh
Priority to US16/683,983 priority patent/US11563930B2/en
Application granted granted Critical
Publication of CN108508620B publication Critical patent/CN108508620B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/42Diffraction optics, i.e. systems including a diffractive element being designed for providing a diffractive effect
    • G02B27/4205Diffraction optics, i.e. systems including a diffractive element being designed for providing a diffractive effect having a diffractive optical element [DOE] contributing to image formation, e.g. whereby modulation transfer function MTF or optical aberrations are relevant

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Studio Devices (AREA)

Abstract

本发明公开一种激光投射模组的检测方法。检测方法包括:获取可见光摄像模组采集的可见光图像;判断可见光图像中是否存在人脸;在可见光图像中存在人脸时,获取图像采集器采集的激光图案;判断激光图案是否存在预设标识;在激光图案中不存在预设标识时确定深度摄像模组异常。本发明还公开一种激光投射模组的检测装置和电子装置。本发明的激光投射模组的检测方法、检测装置和电子装置在可见光图像中存在人脸时判断深度摄像模组是否异常,从而可以在深度摄像模组异常时关闭激光投射模组或减小激光投射模组的发射功率,以避免伤害用户。

Description

激光投射模组的检测方法、检测装置和电子装置
技术领域
本发明涉及成像技术领域,特别涉及一种激光投射模组的检测方法、激光投射模组的检测装置和电子装置。
背景技术
深度摄像模组利用激光投射模组的光源发射激光,从而辅助红外摄像头获取结构光图像。正常情况下,光源发射的激光通过光学系统(例如准直元件、衍射光学元件)后能量衰减,不会对人体造成伤害。然而,光学系统通常由玻璃或其他易碎的部件组成,一旦遇到摔落等情况,光学系统破裂或发生其他的异常情形,激光将直接发射出来,照射用户的身体或眼睛,造成严重的安全问题,如何确定深度摄像模组异常是本领域亟需解决的问题。
发明内容
本发明实施方式提供一种激光投射模组的检测方法、激光投射模组的检测装置和电子装置。
本发明实施方式的激光投射模组的检测方法,用于电子装置,所述电子装置包括可见光摄像模组和深度摄像模组,所述深度摄像模组包括所述激光投射模组和图像采集器,所述可见光摄像模组和所述图像采集器的视场至少部分重叠,所述激光投射模组用于投射激光图案,所述检测方法包括:
获取所述可见光摄像模组采集的可见光图像;
判断所述可见光图像中是否存在人脸;
在所述可见光图像中存在所述人脸时,获取所述图像采集器采集的所述激光图案;
判断所述激光图案中是否存在预设标识;和
在所述激光图案中不存在所述预设标识时确定所述深度摄像模组异常。
本发明实施方式的激光投射模组的检测装置,用于电子装置,所述电子装置包括可见光摄像模组和深度摄像模组,所述深度摄像模组包括所述激光投射模组和图像采集器,所述可见光摄像模组和所述图像采集器的视场至少部分重叠,所述激光投射模组用于投射激光图案,所述检测装置包括:
第一获取模块,所述第一获取模块用于获取所述可见光摄像模组采集的可见光图像;
第一判断模块,所述第一判断模块用于判断所述可见光图像中是否存在人脸;
第二获取模块,所述第二获取模块用于在所述可见光图像中存在所述人脸时,获取所述图像采集器采集的所述激光图案;
第二判断模块,所述第二判断模块用于判断所述激光图案中是否存在预设标识;和
确定模块,所述确定模块用于在所述激光图案中不存在所述预设标识时确定所述深度摄像模组异常。
本发明实施方式的电子装置包括:
可见光摄像模组;
深度摄像模组,所述深度摄像模组包括激光投射模组和图像采集器,所述可见光摄像模组和所述图像采集器的视场至少部分重叠,所述激光投射模组用于投射激光图案;和
处理器,所述处理器用于获取所述可见光摄像模组采集的可见光图像、判断所述可见光图像中是否存在人脸、在所述可见光图像中存在所述人脸时获取所述图像采集器采集的所述激光图案、判断所述激光图案中是否存在预设标识、及在所述激光图案中不存在所述预设标识时确定所述深度摄像模组异常。
本发明实施方式的激光投射模组的检测方法、激光投射模组的检测装置和电子装置,在可见光图像中存在人脸时判断深度摄像模组是否异常,从而可以在深度摄像模组异常时关闭激光投射模组或减小激光投射模组的发射功率,进而避免激光投射模组发射的激光的能量过高而对用户的眼睛产生危害的问题,提高激光投射模组的使用的安全性。
本发明实施方式的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明的上述和/或附加的方面和优点可以从结合下面附图对实施方式的描述中将变得明显和容易理解,其中:
图1是本发明某些实施方式的电子装置的平面示意图;
图2至图5是本发明某些实施方式的电子装置中深度摄像模组的激光投射模组的结构示意图;
图6是本发明某些实施方式的激光投射模组的检测方法的流程示意图;
图7是本发明某些实施方式的激光投射模组的检测装置的示意图;
图8是本发明某些实施方式的电子装置的示意图;
图9是本发明某些实施方式的激光投射模组的检测方法的流程示意图;
图10是本发明某些实施方式的激光投射模组的检测装置的第二获取模块的示意图;
图11是本发明某些实施方式的激光图案的示意图;
图12是本发明某些实施方式的激光投射模组的检测方法的流程示意图;
图13和图14是本发明某些实施方式的激光图案的示意图;
图15是本发明某些实施方式的激光投射模组的检测方法的流程示意图;
图16是本发明某些实施方式的激光投射模组的检测装置的确定模块的示意图。
具体实施方式
下面详细描述本发明的实施方式,所述实施方式的示例在附图中示出,其中,相同或类似的标号自始至终表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施方式是示例性的,仅用于解释本发明的实施方式,而不能理解为对本发明的实施方式的限制。
在本发明的实施方式的描述中,需要理解的是,术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”、“顺时针”、“逆时针”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明的实施方式和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的实施方式的限制。此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个所述特征。在本发明的实施方式的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
在本发明的实施方式的描述中,需要说明的是,除非另有明确的规定和限定,术语“安装”、“连接”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接或可以相互通讯;可以是直接连接,也可以通过中间媒介间接连接,可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本发明的实施方式中的具体含义。
下文的公开提供了许多不同的实施方式或例子用来实现本发明的实施方式的不同结构。为了简化本发明的实施方式的公开,下文中对特定例子的部件和设置进行描述。当然,它们仅仅为示例,并且目的不在于限制本发明。此外,本发明的实施方式可以在不同例子中重复参考数字和/或参考字母,这种重复是为了简化和清楚的目的,其本身不指示所讨论各种实施方式和/或设置之间的关系。此外,本发明的实施方式提供了的各种特定的工艺和材料的例子,但是本领域普通技术人员可以意识到其他工艺的应用和/或其他材料的使用。
请参阅图1,电子装置1000包括深度摄像模组100和可见光摄像模组400。深度摄像模组100包括激光投射模组10和图像采集器20,可见光摄像模组400和图像采集器20的视场至少部分重叠,激光投射模组10用于投射激光图案。在一个例子中,激光投射模组10投射的激光为红外光,图像采集器20为红外摄像头。可见光摄像模组400可以是指采集可见光而形成图像的摄像头。可见光摄像头可以用于获取黑白图像或彩色图像等。
可见光摄像模组400和图像采集器20的视场至少部分重叠,可以理解为可见光摄像模组400和图像采集器20的视场完全重叠,或可见光摄像模组400和图像采集器20的视场部分重叠。在某些实施方式中,可见光摄像模组400和图像采集器20均设置在电子装置1000的正面(前置摄像头)。当然,可见光摄像模组400和图像采集器20也可以均设置在电子装置1000的背面(后置摄像头),在此不做具体限定。
电子装置1000可以是手机、平板电脑、手提电脑、游戏机、头显设备、门禁系统、柜员机等,在此不作限制。深度摄像模组100和可见光摄像模组400均设置在电子装置1000的壳体200内并从壳体200暴露,壳体200可以给深度摄像模组100提供防尘、防水、防摔等保护,壳体200上开设有与深度摄像模组100和可见光摄像模组400对应的孔,以使光线从孔中穿出或穿入壳体200。
请参阅图2,激光投射模组10包括基板组件11、镜筒12、光源13、准直元件14和衍射光学元件15。光源13、准直元件14和衍射光学元件15依次设置在光源13的光路上,具体地,光源13发出的光依次穿过准直元件14和衍射光学元件15。
基板组件11包括基板111及承载在基板111上的电路板112。基板111用于承载镜筒12、光源13和电路板112。基板111的材料可以是塑料,比如聚对苯二甲酸乙二醇酯(Polyethylene Glycol Terephthalate,PET)、聚甲基丙烯酸甲酯(PolymethylMethacrylate,PMMA)、聚碳酸酯(Polycarbonate,PC)、聚酰亚胺(Polyimide,PI)中的至少一种。也就是说,基板111可以采用PET、PMMA、PC或PI中任意一种的单一塑料材质制成。如此,基板111质量较轻且具有足够的支撑强度。
电路板112可以是印刷电路板、柔性电路板、软硬结合板中的任意一种。电路板112上可以开设有过孔113,过孔113内可以用于容纳光源13,电路板112一部分被镜筒12罩住,另一部分延伸出来并可以与连接器17连接,连接器17可以将激光投射模组10连接到其他电子元件上(例如电子装置1000的主板上)。
镜筒12设置在基板组件11上并与基板组件11共同形成收容腔121。具体地,镜筒12可以与基板组件11的电路板112连接,镜筒12与电路板112可以通过粘胶粘接,以提高收容腔121的气密性。当然,镜筒12与基板组件11的具体连接方式可以有其他,例如通过卡合连接。收容腔121可以用于容纳准直元件14、衍射光学元件15等元器件,收容腔121同时形成激光投射模组10的光路的一部分。在本发明实施例中,镜筒12呈中空的筒状,镜筒12包括镜筒侧壁122和限位凸起123。
镜筒侧壁122包围收容腔121,镜筒侧壁122的外壁可以形成有定位结构和安装结构,以便于激光投射模组10的安装(例如安装在电子装置1000内的预定位置)。镜筒12包括相背的第一面124和第二面125,其中收容腔121的一个开口开设在第二面125上,另一个开口开设在第一面124上。第二面125与电路板112结合,例如胶合。
请继续参阅图2,限位凸起123自镜筒侧壁122向内凸出,具体地,限位凸起123自镜筒侧壁122向收容腔121内突出。限位凸起123可以呈连续的环状,或者限位凸起123包括多个,多个限位凸起123间隔分布。限位凸起123围成过光孔1231,过光孔1231可以作为收容腔121的一部分,激光穿过过光孔1231后穿入衍射光学元件15。限位凸起123包括第一限位面1232和第二限位面1233,第一限位面1232与第二限位面1233相背。具体地,限位凸起123位于第一面124与第二面125之间,第一限位面1232较第二限位面1233更靠近第一面124,第一限位面1232与第二限位面1233可以是平行的平面。第一限位面1232与第一面124之间的收容腔121可以用于收容衍射光学元件15,第二限位面1233与第二面125之间的收容腔121可以用于收容准直元件14。
光源13设置在基板组件11上,具体地,光源13可以设置在电路板112上并与电路板112电连接,光源13也可以设置在基板111上并收容在过孔113内,此时,可以通过布置导线将光源13与电路板112电连接。光源13用于发射激光,激光可以是红外光,在一个例子中,光源13可以包括半导体衬底及设置在半导体衬底上的发射激光器,半导体衬底设置在基板111上,发射激光器可以是垂直腔面发射激光器(Vertical Cavity Surface EmittingLaser,VCSEL)。半导体衬底可以设置单个发射激光器,也可以设置由多个发射激光器组成的阵列激光器,具体地,多个发射激光器可以以规则或者不规则的二维图案的形式排布在半导体衬底上。
准直元件14可以是光学透镜,准直元件14用于准直光源13发射的激光,准直元件14收容在收容腔121内,准直元件14可以沿第二面125指向第一面124的方向组装到收容腔121内,具体地,准直元件14包括结合面143,当结合面143与第二限位面1233结合时,可以认为准直元件14安装到位。准直元件14包括光学部141和安装部142,安装部142用于与镜筒侧壁122结合以使准直元件14固定在收容腔121内,在本发明实施例中,结合面143为安装部142的一个端面,光学部141包括位于准直元件14相背两侧的两个曲面。准直元件14的其中一个曲面伸入过光孔1231内。
衍射光学元件15安装在限位凸起123上,具体地,衍射光学元件15包括安装面151,安装面151与第一限位面1232结合以将衍射光学元件15安装在限位凸起123上。其中安装面151上的某些区域可以形成有衍射结构,衍射结构可以与过光孔1231的位置对应并将经准直元件14准直后的激光衍射出与衍射结构对应的激光图案,而安装面151上的另一些区域可以是平面并与第一限位面1232结合。衍射光学元件15可以由玻璃制成,也可以说由复合塑料(如PET)制成。
请继续参阅图2,在某些实施方式中,激光投射模组10包括还保护罩16,保护罩16设置在第一面124上。衍射光学元件15的与安装面151相背的一面与保护罩16抵触。在衍射光学元件15安装在限位凸起123上后安装保护罩16,从而可以防止衍射光学元件15脱落。保护罩16可以由透光材料制成,例如玻璃、聚甲基丙烯酸甲酯(Polymethyl Methacrylate,PMMA)、聚碳酸酯(Polycarbonate,PC)、聚酰亚胺(Polyimide,PI)等。由于玻璃、PMMA、PC、及PI等透光材料均具有优异的透光性能,保护罩16可以不用开设透光孔。如此,保护罩16能够在防止衍射光学元件15脱落的同时,还能够避免衍射光学元件15裸露在镜筒12的外面,从而实现对衍射光学元件15防水防尘。当然,在其他实施方式中,保护罩16可以开设有透光孔,透光孔与衍射光学元件15的光学有效区相对以避免遮挡衍射光学元件15的光路。
请参阅图2和图3,在某些实施方式中,光源13包括边发射激光器(edge-emittinglaser,EEL)131,具体地,边发射激光器131可以是分布反馈式激光器(DistributedFeedback Laser,DFB)。边发射激光器131整体呈柱状,边发射激光器131远离基板组件11的一个端面形成有发光面1311,激光从发光面1311发出,发光面1311朝向准直元件14。采用边发射激光器131作为光源,一方面边发射激光器131较VCSEL阵列的温漂较小,另一方向,由于边发射激光器131为单点发光结构,无需设计阵列结构,制作简单,激光投射模组10的光源成本较低。
请参阅图3和图4,在某些实施方式中,激光投射模组10还包括固定件18,固定件18用于将边发射激光器131固定在基板组件11上。分布反馈式激光器的激光在传播时,经过光栅结构的反馈获得功率的增益。要提高分布反馈式激光器的功率,需要通过增大注入电流和/或增加分布反馈式激光器的长度,由于增大注入电流会使得分布反馈式激光器的功耗增大并且出现发热严重的问题,因此,为了保证分布反馈式激光器能够正常工作,需要增加分布反馈式激光器的长度,导致分布反馈式激光器一般呈细长条结构。当边发射激光器131的发光面1311朝向准直元件14时,边发射激光器131呈竖直放置,由于边发射激光器131呈细长条结构,边发射激光器131容易出现跌落、移位或晃动等意外,因此通过设置固定件18能够将边发射激光器131固定住,防止边发射激光器131发生跌落、移位或晃动等意外。
具体地,请参阅图3,在某些实施方式中,固定件18包括封胶181,封胶181设置在边发射激光器131与基板组件11之间。更具体地,在如图3所示的例子中,边发射激光器131的与发光面1311相背的一面粘接在基板组件11上。在如图4所示的例子中,边发射激光器131的侧面1312也可以粘接在基板组件11上,封胶181包裹住四周的侧面1312,也可以仅粘结侧面1312的某一个面与基板组件11或粘结某几个面与基板组件11。进一步地,封胶181可以为导热胶,以将光源13工作产生的热量传导至基板组件11中。为了提高散热效率,基板111上还可以开设有散热孔1111,光源13或电路板112工作产生的热量可以由散热孔1111散出,散热孔1111内还可以填充导热胶,以进一步提高基板组件11的散热性能。
请参阅图5,在某些实施方式中,固定件18包括设置在基板组件11上的至少两个弹性支撑架182,至少两个支撑架182共同形成收容空间183,收容空间183用于收容边发射激光器131,至少两个支撑架182用于支撑住边发射激光器131,以进一步防止边发射激光器131发生晃动。
在某些实施方式中,基板111可以省去,光源13可以直接固定在电路板112上以减小激光投射器10的整体厚度。
请参阅图1和图6,激光投射模组10的检测方法可以用于上述任意一种实施方式的电子装置1000。检测方法包括:
步骤01:获取可见光摄像模组400采集的可见光图像;
步骤03:判断可见光图像中是否存在人脸;
步骤05:在可见光图像中存在人脸时,获取图像采集器20采集的激光图案;
步骤07:判断激光图案中是否存在预设标识;和
步骤09:在激光图案中不存在预设标识时确定深度摄像模组100异常。
请参阅图1和图7,激光投射模组10的检测装置600可以用于上述任意一种实施方式的电子装置1000。检测装置600包括第一获取模块610、第一判断模块630、第二获取模块650、第二判断模块670和确定模块690。第一获取模块610用于获取可见光摄像模组400采集的可见光图像。第一判断模块630用于判断可见光图像中是否存在人脸。第二获取模块650用于在可见光图像中存在人脸时,获取图像采集器20采集的激光图案。第二判断模块670用于判断激光图案中是否存在预设标识。确定模块690用于在激光图案中不存在预设标识时确定深度摄像模组100异常。
也即是说,本发明实施方式的激光投射模组10的检测方法可以由本发明实施方式的激光投射模组10的检测装置60实现,其中,步骤01可以由第一获取模块610实现,步骤03可以由第一判断模块630实现,步骤05可以由第二获取模块650实现,步骤07可以由第二判断模块670实现,步骤09可以由确定模块690实现。
在某些实施方式中,检测装置600可以是指应用程序(APP)。
请参阅图8,在某些实施方式中,检测装置600可以是指处理器300,处理器300可以应用于上述任意一种实施方式的电子装置1000,或者说电子装置1000包括处理器300。处理器300用于获取可见光摄像模组400采集的可见光图像、判断可见光图像中是否存在人脸、在可见光图像中存在人脸时获取图像采集器20采集的激光图案、判断激光图案中是否存在预设标识、及在激光图案中不存在预设标识时确定深度摄像模组100异常。
也即是说,本发明实施方式的激光投射模组10的检测方法可以由本发明实施方式的电子装置1000实现,其中,步骤01、步骤03、步骤05、步骤07和步骤09可以由处理器300实现。
本发明实施方式的激光投射模组10的检测方法、激光投射模组10的检测装置600和电子装置1000在可见光图像中存在人脸时判断深度摄像模组100是否异常,从而可以在深度摄像模组100异常时关闭激光投射模组10或减小激光投射模组10的发射功率,进而避免激光投射模组10发射的激光的能量过高而对用户的眼睛产生危害的问题,提高激光投射模组10的使用的安全性。
具体地,由于可见光图像具有丰富的二维信息,通过可见光图像可以快速、准确地判断场景中的内容,例如可以先判断可见光图像中是否存在人脸,在可见光图像中存在人脸时,此时使用深度摄像模组100,激光容易对人体产生危险,因此需要通过判断激光图案是否存在预设标识来确定深度摄像模组100是否异常,从而可以在深度摄像模组100异常时关闭激光投射模组10或减小激光投射模组10的发射功率。
在深度摄像模组100异常时(激光投射模组10异常和/或图像采集器20异常),激光图案一般会发生相应的变化,从而导致预设标识可能消失,预设标识可以是激光图案中预先确定的点、线、图案(如圆形、三角形等)等标识。因此,可以判断激光图案中是否存在预设标识,在激光图案中存在预设标识时,说明深度摄像模组100正常;在激光图案中不存在预设标识时,说明深度摄像模组100异常。
在某些实施方式中,激光图案经过被摄物的调制后可能发生变形,在激光图案中存在预设标识时,预设标识仍然可以识别出来。
在某些实施方式中,激光投射模组10可以将激光投射到平面上,如此,获取的激光图案基本不会变形,从而方便后续判断是否存在预设标识。
在某些实施方式中,在可见光图像中不存在人脸时,此时深度摄像模组100一般不会对人体产生危险,因此可以不用进入步骤05,而重新进入步骤01。
在某些实施方式中,在激光图案中存在预设标识时可以确定深度摄像模组100正常,深度摄像模组100可以正常工作。
在某些实施方式中,可以以预定周期获取可见光摄像模组400采集的可见光图像。具体地,以预定周期获取可见光图像,例如每隔半小时获取一帧可见光图像并判断可见光图像中是否存在人脸,相较于获取每一帧可见光图像,本实施方式的电子装置1000的功耗大大减少,同时能够较为及时和准确地获知可见光图像中是否存在人脸。预定周期可以预先存储在电子装置1000中或由用户设置。
请参阅图9,在某些实施方式中,步骤05包括:
步骤052:在可见光图像中存在人脸时,根据人脸在可见光图像中的位置判断人脸是否处于激光投射模组10的工作范围内;和
步骤054:在人脸处于激光投射模组10的工作范围内时获取图像采集器20采集的激光图案。
请参阅图10,在某些实施方式中,第二获取模块650包括判断单元652和获取单元654。判断单元652用于在可见光图像中存在人脸时,根据人脸在可见光图像中的位置判断人脸是否处于激光投射模组10的工作范围内。获取单元654用于在人脸处于激光投射模组10的工作范围内时获取图像采集器20采集的激光图案。
请参阅图8,在某些实施方式中,处理器300用于在可见光图像中存在人脸时根据人脸在可见光图像中的位置判断人脸是否处于激光投射模组10的工作范围内、及在人脸处于激光投射模组10的工作范围内时获取图像采集器20采集的激光图案。
也即是说,步骤052可以由判断单元652或处理器300实现,步骤054可以由获取单元654或处理器300实现。
在人脸处于激光投射模组10的工作范围内且深度摄像模组100异常时,激光投射模组10投射的激光会对人脸造成极大的危险,因此可以判断人脸是否处于激光投射模组10的工作范围内,从而可以在人脸处于激光投射模组10的工作范围内时判断深度摄像模组100是否异常。
具体地,在可见光图像中存在人脸时,可以获取人脸在可见光图像中的位置,并结合可见光摄像模组400的视场、激光投射模组10的工作范围、可见光摄像模组400和激光投射模组10的相对位置,判断人脸是否处于激光投射模组10的工作范围内。在一个实施例中,可见光摄像模组400和激光投射模组10相邻设置,可见光摄像模组400的视场和激光投射模组10的工作范围基本重叠,则在可见光图像中存在人脸时,人脸处于激光投射模组10的工作范围内。
请参阅图11,在某些实施方式中,预设标识为单个,单个预设标识可以减少检测装置600或处理器300判断激光图案中是否存在预设标识所需的工作量,从而快速地确定深度摄像模组100是否异常。
请参阅图12和图13,在某些实施方式中,预设标识为多个,步骤07包括:
步骤072:判断激光图案中是否存在多个预设标识;
步骤09包括:
步骤092:在激光图案中至少一个预设标识不存在时确定深度摄像模组100异常。
请参阅图7,在某些实施方式中,预设标识为多个,第二判断模块670用于判断激光图案中是否存在多个预设标识;确定模块690用于在激光图案中至少一个预设标识不存在时确定深度摄像模组100异常。
请参阅图8,在某些实施方式中,预设标识为多个,处理器300用于判断激光图案中是否存在多个预设标识、及在激光图案中至少一个预设标识不存在时确定深度摄像模组100异常。
也即是说,步骤072可以由第二判断模块670或处理器300实现,步骤092可以由确定模块690或处理器300实现。
多个预设标识可以处于激光图案中的多个位置,从而可以更加全面地判断深度摄像模组100是否异常,提高判断深度摄像模组100是否异常的准确性。
具体地,预设标识为多个,可以理解为,预设标识的数量为两个或两个以上。在图13的示例中,预设标识的数量为4个。
在激光图案中至少一个预设标识不存在时确定深度摄像模组100异常,可以理解为,在激光图案中一个预设标识不存在时确定深度摄像模组100异常,或在激光图案中多个预设标识不存在时确定深度摄像模组100异常。在一个实施例中,预设标识的数量为4个,在激光图案中检测不到预设标识,则4个预设标识不存在,可以确定深度摄像模组100异常。在另一个实施例中,预设标识的数量为4个,在激光图案中检测到了3个预设标识,则1个预设标识不存在,也可以确定深度摄像模组100异常。在又一个实施例中,预设标识的数量为4个,在激光图案中检测到了4个预设标识,则所有预设标识都存在,可以确定深度摄像模组100正常。
请参阅图11、图13和图14,在某些实施方式中,预设标识位于激光图案的至少一个角落处或边缘处。位于角落处或边缘处的预设标识能够更加准确地判断深度摄像模组100是否异常。
具体地,由于激光投射模组10或图像采集器20的边缘区域一般与安装位置抵触,因此在激光投射模组10或图像采集器20受到外力的作用时,激光投射模组10或图像采集器20的边缘区域受到的应力较大,激光投射模组10或图像采集器20的边缘区域比较容易破碎。激光投射模组10或图像采集器20的边缘区域与激光图案的角落处或边缘处对应,因此在激光投射模组10或图像采集器20的边缘区域破碎时,位于激光图案的角落处或边缘处的预设标识能够准确地获知。
在某些实施方式中,激光图案的角落处或边缘处可以是指激光图案中与激光图案的中心的距离大于预设距离的区域。
请继续参阅图11和图13,激光图案呈矩形,激光图案的角落可以是指矩形的四个角落,激光图案的边缘可以是指矩形的上边缘、下边缘、左边缘和右边缘。
请参阅图14,激光图案呈圆形,激光图案的边缘可以是指呈环形的边缘区域。
当然,激光图案也可以呈其他形状,预设标识也设置在呈其他形状的激光图案的角落处或边缘处。
在某些实施方式中,预设标识位于激光图案的至少一个角落处或边缘处,可以理解为,预设标识位于激光图案的一个角落处或边缘处,或预设标识位于激光图案的多个角落处或边缘处。
请参阅图11和图14,在一个实施例中,预设标识为单个,单个预设标识位于激光图案的一个角落处或边缘处。
请参阅图13,在另一个实施例中,预设标识为多个(例如为4个),多个预设标识位于激光图案的多个角落处或边缘处(例如4个预设标识位于激光图案的四个角落处)。
当然,在其他实施方式中,预设标识也可以位于激光图案除了角落处和边缘处的其他位置,例如位于激光图案的中心位置,在此不做具体限定。
请参阅图15,在某些实施方式中,步骤09包括:
步骤094:在激光图案中不存在预设标识时,处理激光图案以判断激光图案中的人脸的亮度是否处于预设亮度范围内;和
步骤096:在人脸的亮度处于预设亮度范围外时确定激光投射模组10异常。
请参阅图16,在某些实施方式中,确定模块690包括处理单元694和第一确定单元696。处理单元694用于在激光图案中不存在预设标识时处理激光图案以判断激光图案中的人脸的亮度是否处于预设亮度范围内。第一确定单元696用于在人脸的亮度处于预设亮度范围外时确定激光投射模组10异常。
请参阅图8,在某些实施方式中,处理器300用于在激光图案中不存在预设标识时处理激光图案以判断激光图案中的人脸的亮度是否处于预设亮度范围内、及在人脸的亮度处于预设亮度范围外时确定激光投射模组10异常。
也即是说,步骤094可以由处理单元694或处理器300实现,步骤096可以由第一确定单元696或处理器300实现。
通过判断激光图案中的人脸的亮度是否处于预设亮度范围可以较为准确地确定深度摄像模组100的异常是否为激光投射模组10异常。
具体地,激光投射模组10投射的激光图案是激光通过准直元件14和衍射光学元件15后形成的。在准直元件14和衍射光学元件15均正常时,激光正常通过使得激光图案中人脸的亮度处于预设亮度范围内。在准直元件14和/或衍射光学元件15异常(例如破碎、倾斜、脱落等)时,激光通过异常的传播(例如发生异常发散或会聚)使得激光图案中人脸的亮度处于预设亮度范围外。人脸的亮度可以是人脸区域的平均亮度,或者是人脸区域的最高亮度或最低亮度,或者是人脸区域的最高亮度和最低亮度的差值等,在此不做具体限定。预设亮度范围可以预先设置在电子装置1000中或由用户设置。需要说明的是,在准直元件14和/或衍射光学元件15异常时,激光投射模组10异常,深度摄像模组100异常。
在某些实施方式中,在人脸的亮度处于预设亮度范围外时可以提示用户激光投射模组10异常。
请参阅图15,在某些实施方式中,步骤09包括:
步骤098:在人脸的亮度处于预设亮度范围内时确定深度摄像模组100异常。
请参阅图16,在某些实施方式中,确定模块690包括第二确定单元698。第二确定单元698用于在人脸的亮度处于预设亮度范围内时确定深度摄像模组100异常。
请参阅图8,在某些实施方式中,处理器300用于在人脸的亮度处于预设亮度范围内时确定深度摄像模组100异常。
也即是说,步骤098可以由第二确定单元698或处理器300实现。
在激光图案中不存在预设标识且激光图案中人脸的亮度处于预设亮度范围内时可以确定深度摄像模组100异常,但是无法确定该异常是否为激光投射模组10异常(可能为图像采集器20异常)。
在某些实施方式中,在人脸的亮度处于预设亮度范围内时可以提示用户深度摄像模组100异常。与人脸的亮度处于预设亮度范围内时相比,人脸的亮度处于预设亮度范围外时,深度摄像模组100对人体造成伤害的可能性较高,伤害也更强,因此人脸的亮度处于预设亮度范围外的故障提示的优先级可以高于人脸的亮度处于预设亮度范围内的故障提示的优先级,如此,使得用户在人脸的亮度处于预设亮度范围外时能够更加容易地察觉到。
在本说明书的描述中,参考术语“一个实施方式”、“一些实施方式”、“示意性实施方式”、“示例”、“具体示例”或“一些示例”等的描述意指结合所述实施方式或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施方式或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施方式或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施方式或示例中以合适的方式结合。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理模块的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(IPM过流保护电路),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本发明的实施方式的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本发明的各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。
尽管上面已经示出和描述了本发明的实施方式,可以理解的是,上述实施方式是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施方式进行变化、修改、替换和变型。

Claims (11)

1.一种激光投射模组的检测方法,用于电子装置,其特征在于,所述电子装置包括可见光摄像模组和深度摄像模组,所述深度摄像模组包括所述激光投射模组和图像采集器,所述可见光摄像模组和所述图像采集器的视场至少部分重叠,所述激光投射模组用于投射激光图案,所述检测方法包括:
获取所述可见光摄像模组采集的可见光图像;
判断所述可见光图像中是否存在人脸;
在所述可见光图像中存在所述人脸时,获取所述图像采集器采集的所述激光图案;
判断所述激光图案中是否存在预设标识,所述预设标识位于所述激光图案的中心位置;和
在所述激光图案中不存在所述预设标识时确定所述深度摄像模组异常。
2.根据权利要求1所述的激光投射模组的检测方法,其特征在于,所述在所述可见光图像中存在所述人脸时,获取所述图像采集器采集的所述激光图案的步骤包括:
在所述可见光图像中存在所述人脸时,根据所述人脸在所述可见光图像中的位置判断所述人脸是否处于所述激光投射模组的工作范围内;和
在所述人脸处于所述激光投射模组的工作范围内时获取所述图像采集器采集的所述激光图案。
3.根据权利要求1所述的激光投射模组的检测方法,其特征在于,所述预设标识为多个,所述判断所述激光图案中是否存在预设标识的步骤包括:
判断所述激光图案中是否存在多个所述预设标识;
所述在所述激光图案中不存在所述预设标识时确定所述深度摄像模组异常的步骤包括:
在所述激光图案中至少一个所述预设标识不存在时确定所述深度摄像模组异常。
4.根据权利要求1所述的激光投射模组的检测方法,其特征在于,所述在所述激光图案中不存在所述预设标识时确定所述深度摄像模组异常的步骤包括:
在所述激光图案中不存在所述预设标识时,处理所述激光图案以判断所述激光图案中的所述人脸的亮度是否处于预设亮度范围内;和
在所述人脸的亮度处于所述预设亮度范围外时确定所述激光投射模组异常。
5.根据权利要求1所述的激光投射模组的检测方法,其特征在于,所述在所述激光图案中不存在所述预设标识时确定所述深度摄像模组异常的步骤包括:
在所述激光图案中不存在所述预设标识时,处理所述激光图案以判断所述激光图案中的所述人脸的亮度是否处于预设亮度范围内;和
在所述人脸的亮度处于所述预设亮度范围内时确定所述深度摄像模组异常。
6.一种激光投射模组的检测装置,用于电子装置,其特征在于,所述电子装置包括可见光摄像模组和深度摄像模组,所述深度摄像模组包括所述激光投射模组和图像采集器,所述可见光摄像模组和所述图像采集器的视场至少部分重叠,所述激光投射模组用于投射激光图案,所述检测装置包括:
第一获取模块,所述第一获取模块用于获取所述可见光摄像模组采集的可见光图像;
第一判断模块,所述第一判断模块用于判断所述可见光图像中是否存在人脸;
第二获取模块,所述第二获取模块用于在所述可见光图像中存在所述人脸时,获取所述图像采集器采集的所述激光图案;
第二判断模块,所述第二判断模块用于判断所述激光图案中是否存在预设标识,所述预设标识位于所述激光图案的中心位置;和
确定模块,所述确定模块用于在所述激光图案中不存在所述预设标识时确定所述深度摄像模组异常。
7.一种电子装置,其特征在于,包括:
可见光摄像模组;
深度摄像模组,所述深度摄像模组包括激光投射模组和图像采集器,所述可见光摄像模组和所述图像采集器的视场至少部分重叠,所述激光投射模组用于投射激光图案;和
处理器,所述处理器用于获取所述可见光摄像模组采集的可见光图像、判断所述可见光图像中是否存在人脸、在所述可见光图像中存在所述人脸时获取所述图像采集器采集的所述激光图案、判断所述激光图案中是否存在预设标识,所述预设标识位于所述激光图案的中心位置、及在所述激光图案中不存在所述预设标识时确定所述深度摄像模组异常。
8.根据权利要求7所述的电子装置,其特征在于,所述处理器用于在所述可见光图像中存在所述人脸时根据所述人脸在所述可见光图像中的位置判断所述人脸是否处于所述激光投射模组的工作范围内、及在所述人脸处于所述激光投射模组的工作范围内时获取所述图像采集器采集的所述激光图案。
9.根据权利要求7所述的电子装置,其特征在于,所述预设标识为多个,所述处理器用于判断所述激光图案中是否存在多个所述预设标识、及在所述激光图案中至少一个所述预设标识不存在时确定所述深度摄像模组异常。
10.根据权利要求7所述的电子装置,其特征在于,所述处理器用于在所述激光图案中不存在所述预设标识时处理所述激光图案以判断所述激光图案中的所述人脸的亮度是否处于预设亮度范围内、及在所述人脸的亮度处于所述预设亮度范围外时确定所述激光投射模组异常。
11.根据权利要求7所述的电子装置,其特征在于,所述处理器用于在所述激光图案中不存在所述预设标识时处理所述激光图案以判断所述激光图案中的所述人脸的亮度是否处于预设亮度范围内、及在所述人脸的亮度处于所述预设亮度范围内时确定所述深度摄像模组异常。
CN201810200489.5A 2018-03-12 2018-03-12 激光投射模组的检测方法、检测装置和电子装置 Active CN108508620B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201810200489.5A CN108508620B (zh) 2018-03-12 2018-03-12 激光投射模组的检测方法、检测装置和电子装置
EP19725915.3A EP3561574A4 (en) 2018-03-12 2019-02-25 LASER PROJECTION MODULE AND DETECTION METHOD AND APPARATUS THEREOF, DEPTH CAMERA MODULE AND ELECTRONIC APPARATUS
PCT/CN2019/076076 WO2019174455A1 (zh) 2018-03-12 2019-02-25 激光投射模组及其检测方法与装置、深度摄像模组和电子装置
US16/683,983 US11563930B2 (en) 2018-03-12 2019-11-14 Laser projection component, detection method thereof, and electronic device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810200489.5A CN108508620B (zh) 2018-03-12 2018-03-12 激光投射模组的检测方法、检测装置和电子装置

Publications (2)

Publication Number Publication Date
CN108508620A CN108508620A (zh) 2018-09-07
CN108508620B true CN108508620B (zh) 2020-03-06

Family

ID=63376441

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810200489.5A Active CN108508620B (zh) 2018-03-12 2018-03-12 激光投射模组的检测方法、检测装置和电子装置

Country Status (1)

Country Link
CN (1) CN108508620B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019174455A1 (zh) * 2018-03-12 2019-09-19 Oppo广东移动通信有限公司 激光投射模组及其检测方法与装置、深度摄像模组和电子装置
CN109194869A (zh) * 2018-10-09 2019-01-11 Oppo广东移动通信有限公司 控制方法、控制装置、深度相机和电子装置
CN109564624B (zh) * 2018-10-31 2020-09-11 深圳市汇顶科技股份有限公司 辨识指纹Logo的方法、装置和电子设备
CN109932828B (zh) * 2019-02-01 2024-10-01 杭州驭光光电科技有限公司 光投射方法及光投射装置
CN113268137A (zh) * 2021-02-03 2021-08-17 深圳赋能软件有限公司 人眼保护装置及方法、身份识别装置及电子设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105959659A (zh) * 2016-04-28 2016-09-21 乐视控股(北京)有限公司 一种实现投影仪自适应调整的方法及投影仪
CN107463902A (zh) * 2017-08-07 2017-12-12 上海碧虎网络科技有限公司 一种投影机自动识别投影异常的方法和系统
CN206877018U (zh) * 2017-07-07 2018-01-12 深圳奥比中光科技有限公司 结构紧凑的光学投影模组

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090100661A (ko) * 2008-03-20 2009-09-24 엘지이노텍 주식회사 무한 결상 광학계 및 무한 결상 광학계를 이용한 카메라모듈 제작 방법.
US10174931B2 (en) * 2015-06-03 2019-01-08 Apple Inc. Integrated optical modules with enhanced reliability and integrity
CN106990659A (zh) * 2017-05-09 2017-07-28 深圳奥比中光科技有限公司 激光投影装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105959659A (zh) * 2016-04-28 2016-09-21 乐视控股(北京)有限公司 一种实现投影仪自适应调整的方法及投影仪
CN206877018U (zh) * 2017-07-07 2018-01-12 深圳奥比中光科技有限公司 结构紧凑的光学投影模组
CN107463902A (zh) * 2017-08-07 2017-12-12 上海碧虎网络科技有限公司 一种投影机自动识别投影异常的方法和系统

Also Published As

Publication number Publication date
CN108508620A (zh) 2018-09-07

Similar Documents

Publication Publication Date Title
CN108508620B (zh) 激光投射模组的检测方法、检测装置和电子装置
CN108507761B (zh) 激光投射模组及其检测方法与装置、深度相机和电子装置
CN209765376U (zh) 便携式电子设备
CN108627936B (zh) 激光投射结构和电子装置
CN108387365B (zh) 激光投射模组及其损坏的检测方法、深度相机和电子装置
CN108490629B (zh) 结构光投射器及其检测方法与装置、图像获取装置和电子设备
CN108344378B (zh) 激光投射模组及其损坏的检测方法、深度相机和电子装置
CN113156742B (zh) 结构光投射器及其控制方法、深度相机和电子装置
US10725311B2 (en) Laser projector, image acquisition device and electronic apparatus
US11525669B2 (en) Laser projection module, depth camera and electronic device
CN108388072B (zh) 激光投射模组、深度相机和电子装置
CN108508624B (zh) 激光投射模组及其检测方法与装置、深度相机和电子装置
CN108344377B (zh) 激光投射模组、深度相机和电子装置
CN108924295B (zh) 光电模组、深度相机和终端
US11563930B2 (en) Laser projection component, detection method thereof, and electronic device
CN108490572B (zh) 激光投射模组、深度相机及电子装置
CN108415178B (zh) 激光投射器的保护组件、激光投射结构和电子装置
CN108445643B (zh) 结构光投射模组及其检测方法与装置、图像获取结构和电子装置
US11300865B2 (en) Systems for controlling laser projector and mobile terminals
CN108983432B (zh) 激光投射器、深度获取装置和终端
CN108804900B (zh) 验证模板的生成方法和生成系统、终端和计算机设备
CN108508687B (zh) 激光投射模组、深度相机和电子装置
CN108508688B (zh) 激光发射器、结构光投射模组、深度相机和电子设备
CN108490595B (zh) 结构光投射模组、图像获取装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 523860 No. 18, Wu Sha Beach Road, Changan Town, Dongguan, Guangdong

Applicant after: OPPO Guangdong Mobile Communications Co., Ltd.

Address before: 523860 No. 18, Wu Sha Beach Road, Changan Town, Dongguan, Guangdong

Applicant before: Guangdong OPPO Mobile Communications Co., Ltd.

GR01 Patent grant
GR01 Patent grant