CN117321381A - 飞行时间相机模组及显示设备 - Google Patents
飞行时间相机模组及显示设备 Download PDFInfo
- Publication number
- CN117321381A CN117321381A CN202180003077.2A CN202180003077A CN117321381A CN 117321381 A CN117321381 A CN 117321381A CN 202180003077 A CN202180003077 A CN 202180003077A CN 117321381 A CN117321381 A CN 117321381A
- Authority
- CN
- China
- Prior art keywords
- time
- infrared laser
- camera module
- flight camera
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001514 detection method Methods 0.000 claims description 106
- 230000003287 optical effect Effects 0.000 claims description 20
- 238000009434 installation Methods 0.000 claims description 12
- 230000000694 effects Effects 0.000 claims description 7
- 239000003292 glue Substances 0.000 claims description 5
- 230000001965 increasing effect Effects 0.000 claims description 5
- 230000000903 blocking effect Effects 0.000 claims description 4
- 239000000463 material Substances 0.000 claims description 4
- 229910052751 metal Inorganic materials 0.000 claims description 3
- 239000002184 metal Substances 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 29
- 238000000034 method Methods 0.000 description 15
- 238000013461 design Methods 0.000 description 7
- 238000002366 time-of-flight method Methods 0.000 description 7
- 230000006399 behavior Effects 0.000 description 6
- 238000005259 measurement Methods 0.000 description 6
- 230000017525 heat dissipation Effects 0.000 description 5
- 238000005452 bending Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000003014 reinforcing effect Effects 0.000 description 4
- 230000009286 beneficial effect Effects 0.000 description 3
- 230000006872 improvement Effects 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 239000011248 coating agent Substances 0.000 description 2
- 238000000576 coating method Methods 0.000 description 2
- 239000006185 dispersion Substances 0.000 description 2
- 238000007789 sealing Methods 0.000 description 2
- 239000000758 substrate Substances 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 238000002834 transmittance Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 229910000838 Al alloy Inorganic materials 0.000 description 1
- VYZAMTAEIAYCRO-UHFFFAOYSA-N Chromium Chemical compound [Cr] VYZAMTAEIAYCRO-UHFFFAOYSA-N 0.000 description 1
- 208000027418 Wounds and injury Diseases 0.000 description 1
- 239000000853 adhesive Substances 0.000 description 1
- 230000001070 adhesive effect Effects 0.000 description 1
- 229910052782 aluminium Inorganic materials 0.000 description 1
- XAGFODPZIPBFFR-UHFFFAOYSA-N aluminium Chemical compound [Al] XAGFODPZIPBFFR-UHFFFAOYSA-N 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000003542 behavioural effect Effects 0.000 description 1
- 229910052804 chromium Inorganic materials 0.000 description 1
- 239000011651 chromium Substances 0.000 description 1
- 230000006378 damage Effects 0.000 description 1
- 238000013016 damping Methods 0.000 description 1
- 230000001627 detrimental effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 238000010438 heat treatment Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 208000014674 injury Diseases 0.000 description 1
- 238000002955 isolation Methods 0.000 description 1
- 238000003475 lamination Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 238000007747 plating Methods 0.000 description 1
- 229920003229 poly(methyl methacrylate) Polymers 0.000 description 1
- 239000004926 polymethyl methacrylate Substances 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000000630 rising effect Effects 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/22—Measuring arrangements characterised by the use of optical techniques for measuring depth
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/481—Constructional features, e.g. arrangements of optical elements
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
- G09F9/00—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Optical Radar Systems And Details Thereof (AREA)
Abstract
一种飞行时间相机模组及显示设备。飞行时间相机模组包括:第一承载板(203)、第二承载板(207)、结构支架(304)、红外激光发射模块(201,202)、镜头(205)、飞行时间传感器(206)。第一承载板(203)、结构支架(304)和第二承载板(207)层叠设置,且第一承载板(203)和第二承载板(207)分别固定于结构支架(304)的两侧,红外激光发射模块(201,202)设置于第一承载板(203)的远离结构支架(304)的一侧,第一承载板(203)包括位于红外激光发射模块(201,202)一侧的镜头通孔(204),结构支架(304)包括对应于镜头通孔(204)的支架通孔(302),镜头(205)穿过支架通孔(302),飞行时间传感器(206)设置于第二承载板(207)上,并被配置为感测镜头(205)收集的红外光以生成深度信息。
Description
本公开的实施例涉及一种飞行时间相机模组及显示设备。
飞行时间(Time of Flight,ToF)方法是一种通过测量飞行时间(即,测量光从反射到返回的时间)来计算距离的方法。ToF相机是一种被配置成使用ToF方法来捕获物体的深度信息的相机。根据测量原理的不同,飞行时间方法可以分为D-ToF(Direct-ToF)直接测量和I-ToF(Indirect-ToF)间接测量;其中,D-ToF直接测量是测量光从发射到返回需要的时间差,然后乘以光速并除以2,以得出深度信息;而I-ToF间接测量是测量发射光波和返回光波之间的相位差,以得出深度信息。
最初,TOF技术主要应用在测距领域,目前随着技术精度的提高和人工智能等算法和算力的提升,尤其是TOF CCD/CMOS芯片工艺的提升,使TOF相机的分辨率提升而功耗降低,有了更多小型化微型化的设计。现在,TOF相机广泛应用在移动端,为手机等移动设备提供辅助成像。
发明内容
本公开至少一些实施例提供一种飞行时间相机模组。该飞行时间相机模组包括:第一承载板、第二承载板、结构支架、红外激光发射模块、镜头、飞行时间传感器;其中,所述第一承载板、所述结构支架和所述第二承载板层叠设置,且所述第一承载板和所述第二承载板分别固定于所述结构支架的两侧,所述红外激光发射模块设置于所述第一承载板的远离所述结构支架的一侧,所述第一承载板包括位于所述红外激光发射模块一侧的镜头通孔,所述结构支架包括对应于所述镜头通孔的支架通孔,所述镜头穿过所述支架通孔,所述飞行时间传感器设置于所述第二承载板上,并被配置为感测所述镜头收集的红外光以生成深度信息。
例如,本公开一些实施例提供的飞行时间相机模组还包括:外壳;其中,所述结构支架包括多个楔角,所述外壳包括与所述多个楔角一一对应的楔角安装部,所述结构支架通过所述多个楔角与所述多个楔角安装部的配合固定于所述外壳。
例如,在本公开一些实施例提供的飞行时间相机模组中,所述红外激光发射模块包括第一红外激光发射模块和第二红外激光发射模块,所述第一红外激光发射模块和所述第二红外激光发射模块并排设置于所述第一承载板的远离所述结构支架的一侧,所述镜头通孔位于所述第二红外激光发射模块的远离所述第一红外激光发射模块的一侧。
例如,在本公开一些实施例提供的飞行时间相机模组中,所述第一红外激光发射模块的中心、所述第二红外激光发射模块的中心和所述镜头的中心三者在所述第一承载板上的 正投影位于同一直线上。
例如,本公开一些实施例提供的飞行时间相机模组还包括:前壳;其中,所述前壳包括前表面,所述前表面包括向朝向所述结构支架的方向凹陷的第一凹槽和第二凹槽;所述第一凹槽包括与所述第一红外激光发射模块对应的第一开口以及与所述第二红外激光发射模块对应的第二开口,所述第二凹槽包括与所述镜头对应的第三开口;所述飞行时间相机模组还包括第一滤光片,所述第一滤光片覆盖所述第二凹槽,所述第一滤光片允许与所述第一红外激光发射模块和所述第二红外激光发射模块发射的红外光相同波段的红外光透过。
例如,本公开一些实施例提供的飞行时间相机模组还包括:第二滤光片,其中,所述第二滤光片覆盖所述第一凹槽,所述第二滤光片允许与所述第一红外激光发射模块和所述第二红外激光发射模块发射的红外光相同波段的红外光透过。
例如,在本公开一些实施例提供的飞行时间相机模组中,所述第一红外激光发射模块与所述第二红外激光发射模块的中心距离为d,所述第一红外激光发射模块与所述第二红外激光发射模块到所述第二滤光片的距离均为h,所述第一红外激光发射模块与所述第二红外激光发射模块的水平发射角均为a,所述第一红外激光发射模块与所述第二红外激光发射模块的垂直发射角均为b,所述第一盖板在平行于所述第一红外激光发射模块与所述第二红外激光发射模块的中心连线的方向上的尺寸c1和所述第二滤光片在垂直于所述第一红外激光发射模块与所述第二红外激光发射模块的中心连线的方向上的尺寸c2分别满足下述公式:c1>2h*tan(a/2)+d,c2>2h*tan(b/2)。
例如,本公开一些实施例提供的飞行时间相机模组还包括:连接板、第二柔性电路板和线缆;其中,所述连接板与所述第一承载板通过所述第二柔性电路板进行电连接,所述线缆与所述连接板电连接,所述线缆用于与外部电源和外部设备至少之一连接。
例如,在本公开一些实施例提供的飞行时间相机模组中,所述结构支架还包括第四开口以及限位环,所述限位环位于所述结构支架的远离所述第一承载板的一侧,所述第二柔性电路板弯折穿过所述第四开口和所述限位环。
例如,本公开一些实施例提供的飞行时间相机模组还包括:前壳和后壳;其中,所述后壳包括后表面,所述后壳通过所述后表面与所述前壳固定以共同实现整机覆盖;所述前壳包括前表面,所述前表面相对于所述后表面倾斜设置,所述前表面相对于所述后表面的倾斜角的取值范围为[20°,40°]。
例如,本公开一些实施例提供的飞行时间相机模组还包括:后壳和后壳堵盖;其中,所述后壳包括第五开口,所述连接板固定于所述后壳且与所述第五开口对应;所述后壳堵盖用于封堵所述第五开口,所述后壳堵盖为中空结构,所述线缆穿过所述中孔结构与所述连接板电连接。
例如,本公开一些实施例提供的飞行时间相机模组还包括:红外激光电路模块和外壳;其中,所述红外激光电路模块设置于所述第一承载板的远离所述结构支架的一侧;所述红 外激光电路模块的远离所述第一承载板的一侧设置有导热胶,所述导热胶被配置为与所述外壳接触,所述外壳的材料包括金属。
例如,本公开一些实施例提供的飞行时间相机模组还包括:第一柔性电路板;其中,所述第一承载板与所述第二承载板均为印刷电路板,所述第一承载板与所述第二承载板通过所述第一柔性电路板进行电连接。
例如,本公开一些实施例提供的飞行时间相机模组还包括:运算部件;其中,所述运算部件设置于所述第一承载板上,所述运算部件被配置为根据所述深度信息,确定在所述飞行时间相机模组的视野内的人体的数量、距离、在视野内的总活动时间、在视野内的停留时间至少之一,以及为在所述飞行时间相机模组的视野内的人体设置标识。
例如,在本公开一些实施例提供的飞行时间相机模组中,所述第一红外激光发射模块与所述第二红外激光发射模块的中心距离为15-30mm。
例如,在本公开一些实施例提供的飞行时间相机模组中,所述第二红外激光发射模块与所述镜头的中心距离为20-60mm。
例如,在本公开一些实施例提供的飞行时间相机模组中,所述镜头的水平视场角大于100°,所述镜头的垂直视场角大于80°。
例如,在本公开一些实施例提供的飞行时间相机模组中,所述第一红外激光发射模块与所述第二红外激光发射模块各自均包括垂直腔面发射激光器和扩束器,所述垂直腔面发射激光器的发射功率为1~1.4W,所述垂直腔面发射激光器的水平发射角大于或等于95°,所述垂直腔面发射激光器的垂直发射角大于或等于75°,所述飞行时间相机模组的最大探测距离为5-7m。
例如,在本公开一些实施例提供的飞行时间相机模组中,所述飞行时间相机模组的安装高度为H,所述镜头的垂直视场角为α,所述飞行时间相机模组的镜头俯仰角为θ,所述飞行时间相机模组的探测距离范围为[L1,L2],所述飞行时间相机模组在探测距离L1处的探测高度范围为[h1,h2],且满足下述公式关系:tan(α/2-θ)*L1+H>h2,H-tan(α/2+θ)*L1<h1。
例如,在本公开一些实施例提供的飞行时间相机模组中,L1的取值范围为0.3-0.7m,L2的取值范围为5-7m,h1的取值范围为1-1.2m,h2的取值范围为1.9-2.3m。
本公开至少一些实施例还提供一种上述飞行时间相机模组的应用方法。该应用方法包括:确定应用场景所需的探测距离范围[L1,L2]以及在探测距离L1处的探测高度范围[h1,h2];根据下述公式:tan(α/2-θ)*L1+H>h2,H-tan(α/2+θ)*L1<h1,确定所述飞行时间相机模组的安装高度H、所述镜头的垂直视场角α及所述飞行时间相机模组的镜头俯仰角θ;以及根据探测距离L2确定所述第一红外激光发射模块与所述第二红外激光发射模块的发射功率。
例如,在本公开一些实施例提供的应用方法中,L1的取值范围为0.3-0.7m,L2的取值范围为5-7m,h1的取值范围为1-1.2m,h2的取值范围为1.9-2.3m。
本公开至少一些实施例还提供一种显示设备,包括:设备主体和上述飞行时间相机模 组;其中,所述飞行时间相机模组设置于所述设备主体的顶部,所述设备主体包括显示屏。
例如,在本公开一些实施例提供的显示设备中,所述飞行时间相机模组被配置为检测在预定的检测区内是否有人;所述显示屏被配置为在所述预定的检测区内没有人的情况下显示广告内容,以及在所述预定的检测区内有人的情况下显示商品信息。
例如,在本公开一些实施例提供的显示设备中,所述显示屏被配置为显示广告内容;所述飞行时间相机模组被配置为:检测在预定的检测区内是否有人,在所述预定的检测区内有人的情况下,为所述预定的检测区内的每个人提供独立标识,并对每个人进行追踪,统计每个人在所述预定的检测区内的停留时间,当停留时间大于阈值时,广告阅读量增加1;以及若在规定时间间隔内,所述独立标识消失并重复出现,则广告阅读量不进行重复计数。
为了更清楚地说明本公开实施例的技术方案,下面将对实施例的附图作简单地介绍,显而易见地,下面描述中的附图仅仅涉及本公开的一些实施例,而非对本公开的限制。
图1A-1B为本公开一些实施例提供的一种飞行时间相机模组的内部结构示意图;
图1C-1D为本公开一些实施例提供的一种飞行时间相机模组的外部结构示意图;
图1E为本公开一些实施例提供的一种飞行时间相机模组的前壳安装结构的示意图;
图1F为本公开一些实施例提供的一种飞行时间相机模组的结构支架示意图;
图1G为本公开一些实施例提供的一种飞行时间相机模组的前壳内部结构示意图;
图1H为本公开一些实施例提供的一种飞行时间相机模组的前壳安装结构的侧视图;
图1I为本公开一些实施例提供的一种飞行时间相机模组的前壳前表面的示意图;
图1J为本公开一些实施例提供的另一种飞行时间相机模组的内部结构示意图;
图1K为本公开一些实施例提供的一种飞行时间相机模组的后壳安装结构的示意图;
图1L为本公开一些实施例提供的一种飞行时间相机模组的第二柔性电路板安装结构示意图;
图1M为本公开一些实施例提供的一种飞行时间相机模组的连接板安装结构示意图;
图1N为本公开一些实施例提供的一种飞行时间相机模组的连接板和线缆的连接示意图;
图2A-2B为本公开一些实施例提供的一种飞行时间相机模组中的第一盖板的尺寸设置示意图;
图3A为本公开一些实施例提供的一种飞行时间相机模组的安装位置示意图;
图3B为本公开一些实施例提供的一种飞行时间相机模组的安装示意图;
图4为本公开一些实施例提供的一种飞行时间相机模组的应用方法的流程图;
图5为本公开一些实施例提供的飞行时间相机模组的检测区域的侧视图;
图6为本公开一些实施例提供的飞行时间相机模组的检测区域的俯视图;
图7为本公开一些实施例提供的一种显示设备的示意性框图;以及
图8为本公开一些实施例提供的一种显示设备的检测效果示例图。
为了使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例的附图,对本公开实施例的技术方案进行清楚、完整地描述。显然,所描述的实施例是本公开的一部分实施例,而不是全部的实施例。基于所描述的本公开的实施例,本领域普通技术人员在无需创造性劳动的前提下所获得的所有其他实施例,都属于本公开保护的范围。
除非另外定义,本公开使用的技术术语或者科学术语应当为本公开所属领域内具有一般技能的人士所理解的通常意义。本公开中使用的“第一”、“第二”以及类似的词语并不表示任何顺序、数量或者重要性,而只是用来区分不同的组成部分。同样,“一个”、“一”或者“该”等类似词语也不表示数量限制,而是表示存在至少一个。“包括”或者“包含”等类似的词语意指出现该词前面的元件或者物件涵盖出现在该词后面列举的元件或者物件及其等同,而不排除其他元件或者物件。“连接”或者“相连”等类似的词语并非限定于物理的或者机械的连接,而是可以包括电性的连接,不管是直接的还是间接的。“上”、“下”、“左”、“右”等仅用于表示相对位置关系,当被描述对象的绝对位置改变后,则该相对位置关系也可能相应地改变。
随着物联网技术的发展,以大数据和人工智能为基础的新零售模式逐渐在世界范围内兴起。企业在向普通人群提供数字化服务的同时,也希望能够获取消费者信息。例如,对广告进行播放的同时采集观看者的反馈,得到广告有效阅读量,据此可以对广告策略进行调整以实现更好的商业广告布局。虽然以人脸识别为依托的人体识别可以通过相机得到人群的详细属性,但此种方法在获取信息的同时,势必带来个人包括面部特征在内的属性信息记录。近些年来,关于隐私泄露带来的问题越来越引起人们的关注。为了兼顾个人隐私的保护,唯一的解决方法就是在硬件层面不涉及任何个人信息的采集。
近些年利用3D深度信息进行物体识别、行为检测的场景越来越多,3D深度相机被广泛应用于机器视觉等领域。常见的3D深度相机包括基于双目立体视觉原理的3D相机、基于结构光原理的3D相机、以及基于飞行时间远离的3D相机,其中,双目立体视觉原理和结构光原理都是依托于RGB/灰度图像的额外投射计算得到深度信息,设备本身在获取深度信息的过程中会进行高分辨率图像的处理,因此无法满足隐私保护需求。而TOF技术是直接测量发射光与接收光的时间/相位差得到点云图,深度信息的获取不依托二维图像,因此可以满足隐私保护的需求。
本公开至少一些实施例提供一种飞行时间相机模组。该飞行时间相机模组包括:第一承载板、第二承载板、结构支架、红外激光发射模块、镜头、飞行时间传感器。其中,第一承载板、结构支架和第二承载板层叠设置,且第一承载板和第二承载板分别固定于结构支架的两侧,红外激光发射模块设置于第一承载板的远离结构支架的一侧,第一承载板包括位于红外激光发射模块一侧的镜头通孔,结构支架包括对应于镜头通孔的支架通孔,镜 头穿过支架通孔,飞行时间传感器设置于第二承载板的靠近结构支架的一侧,并被配置为感测镜头收集的红外光以生成深度信息。
本公开的一些实施例还提供对应于上述飞行时间相机模组的应用方法及显示设备。
本公开的实施例提供的飞行时间相机模组,通过第一承载板、结构支架和第二承载板的三层层叠结构设计,可以对各相机模组中的各元件(器件)进行合理布局,同时有利于整体结构的紧凑、稳固和散热。
下面结合附图对本公开的几个实施例进行详细说明。需要说明的是,为了保持本公开实施例的说明的清楚和简要,可省略已知功能和已知部(元)件的详细说明。当本公开实施例的任一部(元)件在一个以上的附图中出现时,该部(元)件在每个附图中由相同或类似的参考标号表示。
图1A-1B为本公开一些实施例提供的一种飞行时间相机模组的内部结构示意图;图1C-1D为本公开一些实施例提供的一种飞行时间相机模组的外部结构示意图;图1E为本公开一些实施例提供的一种飞行时间相机模组的前壳安装结构的示意图;图1F为本公开一些实施例提供的一种飞行时间相机模组的结构支架示意图;图1G为本公开一些实施例提供的一种飞行时间相机模组的前壳内部结构示意图;图1H为本公开一些实施例提供的一种飞行时间相机模组的前壳安装结构的侧视图;图1I为本公开一些实施例提供的一种飞行时间相机模组的前壳前表面的示意图;图1J为本公开一些实施例提供的另一种飞行时间相机模组的内部结构示意图;图1K为本公开一些实施例提供的一种飞行时间相机模组的后壳安装结构的示意图;图1L为本公开一些实施例提供的一种飞行时间相机模组的第二柔性电路板安装结构示意图;图1M为本公开一些实施例提供的一种飞行时间相机模组的连接板安装结构示意图;图2A-2B为本公开一些实施例提供的一种飞行时间相机模组中的第一盖板的尺寸设置示意图。
例如,如图1A-1B所示,该飞行时间相机模组包括第一承载板203、第二承载板207、结构支架304、红外激光发射模块(201和202)、镜头205、飞行时间传感器206。
例如,如图1A-1B所示,第一承载板203、结构支架304和第二承载板207层叠设置,且第一承载板203和第二承载板207分别固定于结构支架304的两侧。例如,在一些示例中,第一承载板203可以通过多个(例如8个,但不限于此)螺丝孔位303与结构支架304固定在一起;类似地,第二承载板207也可以通过多个(例如8个,但不限于此)螺丝孔位303与结构支架304固定在一起;需要说明的是,本公开的实施例包括但不限于此。
例如,如图1A-1B所示,红外激光发射模块(201和202)设置于第一承载板203的远离结构支架304的一侧,第一承载板包括位于红外激光发射模块(201和202)一侧的镜头通孔204。例如,红外激光发射模块的数量可以为一个或多个,本公开的实施例包括但不限于此。例如,如图1A-1B所示,红外激光发射模块可以包括第一红外激光发射模块201和第二红外激光发射模块202。需要说明的是,虽然本公开的实施例均以两个红外激光发射模块(即第一红外激光发射模块201和第二红外激光发射模块202)为例进行说明,但不应视 作对本公开的限制。在实际应用中,红外激光发射模块的数量可以根据实际需要进行设置。
例如,如图1A-1B所示,第一红外激光发射模块201和第二红外激光发射模块202并排设置于第一承载板203上,且位于第一承载板203的远离结构支架304的一侧。第一承载板203包括位于第二红外激光发射模块202的远离第一红外激光发射模块201一侧的镜头通孔204。结构支架304包括对应于镜头通孔204的支架通孔302,镜头205穿过支架通孔302。例如,镜头205可以经由镜头通孔204和/或支架通孔302进行固定,本公开的实施例包括但不限于此。例如,在一些示例中,镜头205可以通过透镜胶圈固定于镜头通孔204,从而实现镜头205的固定、缓震、防尘以及减少干扰光。
例如,在一些示例中,第一红外激光发射模块201的中心、第二红外激光发射模块202的中心和镜头205的中心(即镜头通孔204的中心)三者在第一承载板203上的正投影位于同一直线上,从而可以使得第一红外激光发射模块201和第二红外激光发射模块202的激光覆盖范围与镜头205的视野范围重叠或大致重叠,有利于满足超广角和远距离范围检测的要求。值得注意的是,所述三者在第一承载板203上的正投影位于同一直线上,可以包括其中一者的中心在第一承载板203上的正投影与另外两者的中心在第一承载板203上的正投影连线所在直线轻微偏离的情况。当其中任意一者的中心在第一承载板203上的正投影与另外两者的中心在第一承载板203上的正投影连线所在直线之间的距离小于或等于10mm时,可以认为第一红外激光发射模块201的中心、第二红外激光发射模块202的中心和镜头205的中心(即镜头通孔204的中心)三者在第一承载板203上的正投影位于同一直线上。
例如,如图1A-1B所示,飞行时间传感器(ToF Sensor)206设置于第二承载板207上,并被配置为感测镜头205收集的红外光以生成深度信息。例如,在一些示例中,飞行时间传感器206可以感测镜头205收集的红外光(例如,该红外光是由第一红外激光发射模块201和第二红外激光发射模块202发射、经过外界物体反射并且经过红外滤光片过滤后被镜头收集的红外光),测量红外光从红外激光发射模块(即第一红外激光发射模块201和第二红外激光发射模块202)的发射单元到感测单元(例如,飞行时间传感器206的感测单元设置于第二承载板207的靠近结构支架304的一侧)的时间,同时记录被拍物体的红外灰度图像;其中,红外滤光片仅允许发射单元发射的相应波长的红外光通过,过滤掉其它波长的光学干扰。需要说明的是,本公开的实施例包括但不限于此;例如,在另一些示例中,飞行时间传感器206可以测量发射光波和返回光波之间的相位差以得出深度信息。例如,飞行时间传感器206包括用于感测红外光的CCD/CMOS芯片等。应当理解的是,为了满足中远距离检测的需要,飞行时间传感器可以选择高QE值的高分辨率传感器(例如640*480像素的TOF CCD)。
例如,该飞行时间相机模组还可以包括运算部件。例如,如图1A-1B所示,运算部件包括系统级芯片(System on Chip,SoC,也称为“片上系统”,例如视觉处理器)208、随机存储器(例如DDR芯片)、Flash闪存芯片等。例如,如图1A-1B所示,上述运算部件设 置于第一承载板203上。例如,如图1A-1B所示,运算部件可以位于第一红外激光发射模块201的远离第二红外激光发射模块202的一侧,本公开的实施例包括但不限于此。例如,运算部件被配置为根据飞行时间传感器206生成的深度信息,确定在飞行时间相机模组的视野内的人体的数量、距离、在视野内的总活动时间、在视野内的停留时间至少之一,以及为在飞行时间相机模组的视野内的人体设置标识(ID)。在本公开的实施例中,运算部件和飞行时间传感器206位于不同的承载板上,有利于飞行时间相机模组的内部结构的散热。
例如,如图1A-1B所示,该飞行时间相机模组还可以包括第一柔性电路板211。例如,第一承载板203和第二承载板207均为印刷电路板,且第一承载板203与第二载板207通过第一柔性电路板211进行电连接。例如,参见图1B和图1J所示,第一柔性电路板211的两侧可以分别与第一承载板203和第二承载板207搭接,且第一柔性电路板211可以弯折绕过第一承载板203和第二承载板207之间的结构支架304。
也就是说,在本公开的实施例提供的飞行时间相机模组中,发射单元(即第一红外激光发射模块201和第二红外激光发射模块202)和感测单元(即飞行时间传感器206)分别集成在两块不同的印刷电路板上;通过层叠设置上下两层印刷电路板,并在上层印刷电路板(即第一承载板203,相应地,下层印刷电路板为第二承载板205)设置镜头通孔204以安装镜头205,可以减小飞行时间相机模组内部结构的厚度,同时使得飞行时间相机模组整体更加紧凑。另外,在上下两层印刷电路板之间设置结构支架304以锁定上下两层印刷电路板,有利于飞行时间相机模组内部结构的稳固。
例如,如图1C-1E所示,该飞行时间相机模组还可以包括外壳;例如,外壳可以包括前壳1和后壳5,前壳1和后壳5配合以共同实现整机覆盖。例如,结构支架304可以包括多个楔角,外壳可以包括与该多个楔角一一对应的楔角安装部,结构支架304通过该多个楔角与该多个楔角安装部的配合固定于外壳。以下,以结构支架304固定于前壳1为例进行说明,但不应视作对本公开的实施例的限制。
例如,如图1E和1G所示,前壳1包括容纳腔,用于容纳第一承载板203、结构支架304和第二承载板207形成的层叠结构。例如,如图1F所示,结构支架304可以包括多个楔角(如图1F中的固定楔角307和对位楔角308所示),每个楔角上具有通孔。示例性地,图1F中示出了3对固定楔角307和1对对位楔角308,本公开的实施例包括但不限于此。例如,如图1G所示,前壳1包括与该多个楔角一一对应的楔角安装部(如图1G中的楔角固定螺丝孔107和楔角对位部108所示)。示例性地,图1G中示出了3对楔角固定螺丝孔107和1对楔角对位部108(在图1G中靠右侧的楔角对位部108被遮挡,因此仅指示出其位置,而未示出其具体结构),分别对应于图1F中的3对固定楔角307和1对对位楔角308。本公开的实施例包括但不限于此。例如,如图1H所示,可以通过螺丝、固定楔角307和楔角固定螺丝孔107将结构支架304固定于前壳1;结构支架主体部分可以倾斜设置,通过调节结构支架主体部分与固定楔角主体部分(例如,固定楔角307与楔角固定螺丝孔107接 触的部分为固定楔角主体部分)的夹角,可以调节结构支架主体部分的倾斜角,从而可以快速调节飞行时间相机模组的镜头俯仰角以适应不同的场景。例如,可以通过对位楔角308和楔角对位部108将结构支架304与前壳1进行对位配合,以方便组装和固定。例如,如图1G所示,楔角对位部108可以为柱状结构,在将对位楔角308和楔角对位部108进行对位时,该柱状结构可以穿过对位楔角208上的通孔,从而实现对位配合。本公开的实施例对该柱状结构的具体形状和结构不作限制,只要其能与对位楔角208上的通孔匹配对位即可。
例如,在一些示例中,如图1F所示,固定楔角307可以设置于结构支架304的上下两边(结构支架304的上下两边平行或大致平行于第一红外激光发射模块201和第二红外激光发射模块202的中心连线),而对位楔角308可以设置于结构支架304的左右两边(结构支架304的左右两边垂直或大致垂直于第一红外激光发射模块201和第二红外激光发射模块202的中心连线),本公开的实施例包括但不限于此。应当理解的是,在一些实施例中,结构支架304上的对位楔角308以及前壳1上的楔角对位部108可以省略。例如,在一些实施例中,可以在结构支架304的左右两边设置固定楔角307,并在前壳1的对应位置设置楔角固定螺丝孔107,以实现结构支架304与前壳1之间的固定,从而,可以快速调节飞行时间相机模组的镜头水平方向的探测范围以适应不同的场景。需要说明的是,图1F中的固定楔角307和对位楔角308的数量以及图1G中的楔角固定螺丝孔107和楔角对位部108的数量均是示意性的,本公开的实施例对此不作限制。
例如,如图1C所示,前壳1可以包括前表面(即滤光片2和滤光片3所在表面)。例如,前表面可以垂直于第一承载板203、结构支架304和第二承载板207的层叠方向(也即,前表面平行于第一承载板203所在平面和第二承载板207所在平面),但不限于此。例如,前表面与滤光片2和/或滤光片3的表面平行。
例如,如图1I所示,前壳1的前表面包括向朝向结构支架304的方向凹陷的第一凹槽G1和第二凹槽G2。例如,第一凹槽G1和第二凹槽G2之间具有隔离部SP。第一凹槽G1包括与第一红外激光发射模块201对应的第一开口以及与第二红外激光发射模块202对应的第二开口,第一开口用于暴露第一红外激光发射模块201的发射单元,第二开口用于暴露第二红外激光发射模块202的发射单元;第二凹槽包括与镜头205对应的第三开口,第三开口用于暴露镜头205。例如,第一凹槽G1至少部分呈碗状且向内凹陷(即向外壳内部凹陷),从而有利于第一红外激光发射模块201的发射单元和暴露第二红外激光发射模块202的发射单元发出的红外光的直接出射。例如,第二凹槽G2也向内凹陷。隔离部SP可以防止红外激光发射模块的发射单元发出的红外光经过内部反射、折射、散射等直接进入镜头205(即红外光未经外接环境中的目标物体的反射)而形成的干扰。在一些实施例中,第一开口和第二开口也可以为同一开口,用于暴露第一红外激光发射模块201的发射单元和第二红外激光发射模块202的发射单元。值得注意的是,当红外激光发射模块的数量不为2个时,也可以根据实际数量设置凹槽和开口。
例如,如图1C示,飞行时间相机模组还包括允许与第一红外激光发射模块201和第二红外激光发射模块202发射的红外光相同波段的红外光透过的滤光片(在本公开中,也称为“第一滤光片”)3。滤光片3覆盖第二凹槽G2,以起到密封作用。例如,在一些示例中,滤光片3可以为红外滤光片,以减小环境光等干扰。例如,滤光片3可以包括透明衬底(例如,PMMA衬底,但不限于此)以及红外镀膜,本公开的实施例包括但不限于此。例如,滤光片3允许红外光透过而阻止其他波段的光透过。例如,滤光片3可以为带通滤光片,例如窄带滤光片,但不限于此。以第一红外激光发射模块201和第二红外激光发射模块202发射的红外光的中心波长为850nm为例,滤光片3可以为窄带滤光片;例如,在一个具体示例中,该窄带滤光片对于波长在840nm至880nm之间的红外光的透过率不小于90%,对于波长小于830nm的红外光以及波长大于890nm的红外光的透过率均接近于0。
例如,如图1C所示,飞行时间相机模组还包括允许第一红外激光发射模块201和第二红外激光发射模块202发射的红外光透过的滤光片(在本公开中,也称为“第二滤光片”)2。滤光片2覆盖第一凹槽G1,以起到密封作用。例如,在一些示例中,滤光片2也可以为红外滤光片,以改善第一红外激光发射模块201和第二红外激光发射模块202发射的红外光的单色性,消除杂散光,并减小环境光等干扰。例如,滤光片2允许红外光透过而阻止其他波段的光透过。例如,滤光片2与滤光片3的材质及种类可以相同,具体细节可以参考前述滤光片3的相关描述,在此不再重复赘述。
例如,如图1A所示,该飞行时间相机模组还可以包括红外激光电路模块212;例如,红外激光电路模块212可以为红外激光发射模块提供电源或者用于控制红外激光发射模块。例如,如图1A所示,红外激光电路模块212设置于第一承载板203的远离结构支架304的一侧。例如,红外激光电路模块212靠近红外激光发射模块;例如,如图1A所示,红外激光电路模块212位于第一红外激光发射模块201和第二红外激光发射模块202之间。例如,红外激光电路模块212的远离第一承载板203的一侧涂覆有导热胶,导热胶被配置为与外壳(例如前壳1)接触。例如,当结构支架304固定于前壳1时,导热胶与前壳1接触。例如,外壳(例如前壳1)的材料可以为金属,包括但不限于铝、铝合金等。
例如,如图1C-1D所示,该飞行时间相机模组还可以包括后壳5。后壳包括后表面,后壳5通过后表面与前壳1固定以共同实现整机覆盖。例如,后表面为后壳主体结构所在平面;例如,可以从各个方向对后壳进行投影,其中,投影面积最大时的投影方向与后表面垂直。例如,如图1C-1D所示,前表面相对于后表面倾斜设置。例如,在一些示例中,前表面相对于后表面的倾斜角的范围可以为[20°,40°],以使得该飞行时间相机模组在安装后适用于各种常见的人体检测应用场景。但不限于此。当然,在一些实施例中,前表面也可以平行于后表面。例如,在一些示例中,前表面相对于后表面的倾斜角的范围可以为[0°,40°],但不限于此。例如,在一些示例中,前壳1上可以预留多个螺丝槽,后壳5的后表面上可以预留与该多个螺丝槽对应的多个螺丝孔,从而,前壳1和后壳5可以通过多个螺丝实现一体式安装。需要说明的是,在安装飞行时间相机模组时,后表面通常垂直于地面。 以垂直于地面的方向为竖直方向,则后表面平行于竖直方向;相应地,第一承载板203、结构支架304和第二承载板207形成的层叠结构相对于竖直方向倾斜设置。应当理解的是,在实际应用中,可以通过调整前述楔角301而调节上述层叠结构相对于上述竖直方向的倾斜角(也即上述层叠结构的俯仰角);当然,前表面的俯仰角和上述层叠结构的俯仰角可以保持一致,以使得第一承载板203所在平面与前表面平行。应当理解的是,上述前表面的俯仰角及层叠结构的俯仰角均可以根据实际应用场景的需要进行设置。
例如,如图1C-1D和1J-1L所示,该飞行时间相机模组还可以包括连接板215、第二柔性电路板221和线缆4。例如,连接板215与第一承载板203通过第二柔性电路板211进行电连接;线缆4与连接板215电连接,线缆4用于与外部电源和外部设备(例如PC)至少之一连接。例如,连接板215用于电源信号和数据传输信号的转接等。
例如,如图1L所示,结构支架304包括第四开口和限位环310,限位环310位于结构支架304的远离第一承载板203的一侧。第二柔性电路板221搭接于第一承载板203的靠近结构支架304的一侧,且弯折穿过第四开口和限位环310。结构支架304上的第四开口和限位环310有利于第二柔性电路板221组装位置的量产稳定性,且在实际使用中通过限位减少了其活动量,降低实际使用时震动引起的第二柔性电路板221的脱落风险。
例如,如图1M所示,后壳5包括第五开口(在图1D中,被后壳堵盖6封堵),连接板215固定于后壳5且与第五开口对应;线缆4穿过第五开口与连接板215电连接。例如,在一些示例中,线缆4可以包括供电线和数据线,以分别用于提供电源供电和数据传输等;连接板215可以通过线缆4与外部电源和外部设备(例如PC)连接。
例如,如图1N所示,连接板215上具有线缆接口218,线缆4与该线缆接口218电连接。线缆4的弯折处包裹有弯折保护部41,该弯折保护部41用于保护线缆4的弯折处,以延长线缆4的使用寿命。
例如,如图1D所示,该飞行时间相机模组还可以包括后壳堵盖6。例如,后壳堵盖6为中空结构,线缆4穿过该中空结构与连接板215电连接。后壳堵盖6用于封堵上述第五开口;同时后壳堵盖6还可以对线缆4进行额外的固定和保护,通过拆卸后壳堵盖6可以完成线缆4的快速更换。
例如,如图1D所示,后壳6还包括模组安装部7,该模组安装部7用于将飞行时间相机模组安装固定于某些设备(例如后续将要介绍的显示设备)的顶部或者某些设备门(例如电梯门、冰箱门等)的正上方。例如,如图1D所示,该模组安装部7可以位于后壳堵盖6的两侧。例如,如图1D所示,该模组安装部7可以突出于后壳5的后表面。例如,如图1D所示,该模组安装部7可以包括安装板71;例如,安装板71垂直或大致垂直于后壳6的后表面,安装板71的延伸方向与后壳5的后表面的延伸方向可以相同,安装板71上具有多个通孔以用于固定和/或限位,以便于飞行时间相机模组的安装固定。例如,如图1D所示,该模组安装部7还可以包括与安装板71连接的加强部72,以提高模组安装部的强度。例如,加强部72可以设置为垂直或大致垂直于后壳6的后表面,并且垂直或大致垂直于安 装板71。例如,如图1D所示,每个模组安装部7可以包括两个加强部72,但不限于此;例如,每个模组安装部7中的加强部72的数量也可以为一个(参考图3B所示)或更多个,本公开的实施例对此不作限制。需要说明的是,本公开的实施例对模组安装部7的具体形状和结构不作限制,只要能实现飞行时间相机模组的安装固定即可。
例如,在一些实施例中,第一红外激光发射模块与所述第二红外激光发射模块各自均包括垂直腔面发射激光器(Vertical-Cavity Surface-Emitting Laser,VCSEL)和扩束器。垂直腔面发射激光器是一种半导体激光器,激光可以从其顶面射出。例如,常见的红外激光发射波长为850nm、940nm等。例如,扩束器通常包括扩束透镜或扩散片等。
为了满足超广角和远距离范围检测的要求,飞行时间相机模组的红外激光发射模块需要覆盖广角范围。例如,在一些实施例中,上述垂直腔面发射激光器的水平发射角大于或等于95°,例如水平发射角为100°、110°或120°等等;上述垂直腔面发射激光器的垂直发射角大于或等于75°,例如垂直发射角为80°、85°或90°等等。相应地,为了满足超广角和远距离范围检测的要求,飞行时间相机模组的镜头205需要选用超广角镜头以收集红外光线。例如,在一些实施例中,镜头205的水平视场角大于100°,镜头205的垂直视场角大于80°。应当理解的是,为了实现更佳的性能,镜头205可以具备大相对孔径和低畸变高分辨率的特点,以满足高分辨率ToF Sensor的调制传递函数(Modulation Transfer Function,MTF)的要求。另外,在实际应用中,红外激光发射模块的发射角通常接近于镜头的视场角,也就是说,垂直腔面发射激光器的水平发射角接近于镜头205的水平视场角,垂直腔面发射激光器的垂直发射角接近于镜头205的垂直视场角。还应当理解的是,镜头205的水平视场角与垂直视场角的比例一般近似于TOF Sensor分辨率的水平/垂直比。
在实际应用中,单个红外激光发射模块的激光强度往往难以满足中远距离目标物体的检测需要(中远距离目标物体反射的红外光能量密度太低),导致中远距离目标物体的检测易受干扰且采集信息准确性差。在此情况下,可以考虑增强单个红外激光发射模块的发射功率以满足中远距离目标物体的检测需要,但是,这种方案的实用性较差。一方面,单个红外激光发射模块的发射功率过强(例如,超过其常规工作能力),其发热往往严重且集中,由此导致的散热问题不利于飞行时间相机模组的紧凑化设计;另一方面,单个红外激光发射模块的发射功率过强,在实际应用中可能会对人眼造成伤害,因此也很可能无法通过人眼安全认证。为了解决上述问题,在本公开的实施例提供的飞行时间相机模组中,可以采用两个或更多个红外激光发射模块。需要说明的是,在附图中仅示例性地示出了包括两个红外激光发射模块的飞行时间相机模组,但不应视作对本公开的限制。
在使用多个红外激光发射模块增强发射光强的情况下,需要保证多个红外激光发射模块的激光投射面覆盖镜头205的视野(即镜头205的视场角对应区域)。例如,有效检测区域为红外激光发射模块的激光投射面的交叠区(如图2A所示)。在中远距离下,多个红外激光发射模块照射的非交叠区域(即分散区,如图2A所示)会很小。以选用具有相同发射角的两个红外激光发射模块为例,当两个红外激光发射模块的中心距离为d时,在远距 离状态下,分散区在平行于第一红外激光发射模块201与第二红外激光发射模块202的中心连线的方向上的总尺寸仅为2d。由于垂直腔面发射激光器摆放位置的间距为厘米级间距,从而在远距离状态下,两个红外激光发射模块的发射光基本可以达到有效的交叠。因此,在飞行时间相机模组的结构设计上,重点需要关注的是第一盖板2能够使得两个红外激光发射模块发出的红外光均能够有效射出。
例如,在一些实施例中,如图2A-2B所示,第一红外激光发射模块201与第二红外激光发射模块202的中心距离AB(A、B分别表示两个红外激光发射模块的中心)为d,第一红外激光发射模块201与第二红外激光发射模块202到第一盖板2(如图2A中的黑色粗实线所示)的距离均为h,第一红外激光发射模块201与第二红外激光发射模块的202的水平发射角均为a,第一红外激光发射模块201与第二红外激光发射模块的202的垂直发射角均为b,则第一盖板2在平行于第一红外激光发射模块201与第二红外激光发射模块202的中心连线的方向上的尺寸c1和第一盖板2在垂直于第一红外激光发射模块201与第二红外激光发射模块202的中心连线的方向上的尺寸c2分别满足下述公式:c1>2h*tan(a/2)+d,c2>2h*tan(b/2)。
在采用多个红外激光发射模块时,各个红外激光发射模块发出的红外光之间可能存在非常小的相位差,因此在保证良好散热且不影响印刷电路板的走线布局的前提下,各个红外激光发射模块之间的距离应当尽量小。例如,在一些实施例中,第一红外激光发射模块201与第二红外激光发射模块202的中心距离d为15-30mm,例如20mm等。例如,在一些实施例中,第二红外激光发射模块202与镜头205的中心距离为20-60mm。例如,第一红外激光发射模块201与第二红外激光发射模块202(即垂直腔面发射激光器)的尺寸大约为3-5mm,镜头205的直径大约为10-20mm。
应当理解的是,在本公开的实施例中,在综合考虑第一红外激光发射模块201与第二红外激光发射模块202的尺寸、镜头205的直径、以及散热和紧凑化设计等因素的情况下,第一红外激光发射模块201与第二红外激光发射模块202的中心距离以及第二红外激光发射模块202与镜头205的中心距离均可以根据实际需要进行设置。
例如,在一些实施例中,飞行时间相机模组的最大探测距离可以为5-7m。例如,为了达到上述最大探测距离,同时兼顾人眼安全认证,第一红外激光发射模块201与第二红外激光发射模块202(即垂直腔面发射激光器)的发射功率可以设定为例如1~1.4W,本公开的实施例包括但不限于此。
例如,在一些实施例中,飞行时间相机模组的安装高度为H,镜头的垂直视场角为α,飞行时间相机模组的镜头俯仰角为θ,飞行时间相机模组的探测距离范围为[L1,L2],飞行时间相机模组在探测距离L1处的探测身高范围为[h1,h2],且满足下述公式关系:tan(α/2-θ)*L1+H>h2,H-tan(α/2+θ)*L1<h1。例如,在一些示例中,L1的取值范围为0.3-0.7m,L2的取值范围为5-7m,h1的取值范围为1-1.2m,h2的取值范围为1.9-2.3m。需要说明的是,本公开的实施例包括但不限于此。也就是说,可以根据实际需要设置飞行时间相 机模组的安装高度H、镜头的垂直视场角α、飞行时间相机模组的镜头俯仰角θ,从而调节L1、h1、h2的取值。例如,L2的取值一般是根据检测需要预先设定的,进而,可以根据L2的取值选择具有合适的发射功率的红外激光发射模块。值得注意的是,飞行时间相机模组在探测距离L1处能够对位于探测高度范围[h1,h2]内的物体(包括人体等)或物体位于该探测高度范围[h1,h2]内的部分进行检测,应当理解为飞行时间相机模组可以探测到所述物体的存在,但是否执行计数(例如,统计人数)等功能需要根据算法设计确定,本申请不对此进行限制。值得注意的是,探测距离L1和L2都为水平距离。
例如,本公开的实施例提供的飞行时间相机模组的工作原理大致如下:红外发射模块(第一红外激光发射模块201与第二红外激光发射模块202)按照设置的调制频率发射激光脉冲,激光脉冲经过红外滤光片(即设置有红外镀膜的第一盖板2)投射到外部环境,经外部环境中的目标物体反射后,脉冲光经过红外滤光片(即设置有红外镀膜的第二盖板3)进入镜头205,透过镜头205进入TOF Sensor;TOF Sensor生成的深度信息经过数字信号处理后到达运算部件,运算部件可以对深度信息进行进一步处理并与外部设备交互。本公开的一些实施例还提供一种飞行时间相机模组的应用方法。例如,该飞行时间相机模组为本公开任一实施例提供的飞行时间相机模组,该飞行时间相机模组可以广泛应用于各种需要进行物体识别和/或行为检测的场景,同时可以兼顾隐私保护。图3A为本公开一些实施例提供的一种飞行时间相机模组的安装位置示意图,图3B为本公开一些实施例提供的一种飞行时间相机模组的安装示意图。例如,如图3A-3B所示,飞行时间相机模组可以通过其模组安装部安装在某些设备(例如后续将要介绍的显示设备)的顶部或者某些设备门(例如电梯门、冰箱门等)的正上方,且飞行时间相机模组的前壳的前表面面对检测区域,从而,飞行时间相机模组可以对这些设备或设备门的用户进行识别和/或行为检测,同时在硬件层面满足隐私保护的需求。
图4为本公开一些实施例提供的一种飞行时间相机模组的应用方法的流程图,图5为本公开一些实施例提供的飞行时间相机模组的检测区域的侧视图;图6为本公开一些实施例提供的飞行时间相机模组的检测区域的俯视图。以下,结合图5-6对图4所示的应用方法进行详细说明。
例如,如图4所示,该应用方法可以包括以下步骤S10至步骤S30。
步骤S10:确定应用场景所需的探测距离范围[L1,L2]以及在探测距离L1处的探测高度范围[h1,h2]。
例如,在一些实施例中,L1的取值范围为0.3-0.7m,L2的取值范围为5-7m,h1的取值范围为1-1.2m,h2的取值范围为1.9-2.3m。需要说明的是,本公开的实施例包括但不限于此。也就是说,L1、L2、h1、h2的取值可以根据实际需要进行设置。
步骤S20:根据公式:tan(α/2-θ)*L1+H>h2,H-tan(α/2+θ)*L1<h1,确定飞行时间相机模组的安装高度H、镜头的垂直视场角α及飞行时间相机模组的镜头俯仰角θ。
例如,飞行时间相机模组的安装高度H、镜头的垂直视场角α及飞行时间相机模组的 镜头俯仰角θ均可以参考图5所示。
应当理解的是,飞行时间相机模组的镜头俯仰角θ为上述前表面的俯仰角,也即上述层叠结构的俯仰角。
步骤S20中确定的飞行时间相机模组的安装高度H、镜头的垂直视场角α及飞行时间相机模组的镜头俯仰角θ,可以确保飞行时间相机模组在探测距离L1处能够对位于探测高度范围[h1,h2]内的物体(包括人体等)或物体位于该探测高度范围[h1,h2]内的部分进行检测。
步骤S30:根据探测距离L2确定第一红外激光发射模块与第二红外激光发射模块的发射功率。
应当理解的是,第一红外激光发射模块与第二红外激光发射模块的发射功率应当满足探测距离范围能够达到探测距离L2的需要,同时还要兼顾人眼安全认证,因此,探测距离L2通常也应当根据实际应用场景进行合理设置。例如,可以在根据实际应用场景设置L2的数值后,根据L2的数值选择具有合适的发射功率的红外激光发射模块。
例如,如图6所示,飞行时间相机模组的检测区域位于一个半径为L2的扇形区域内,该半径为L2的扇形区域的圆心角接近于或等于镜头的水平视场角。例如,该半径为L2的扇形区域包括盲区和检测区,其中,盲区为半径为L1的扇形区域,身高不超过h1的人位于盲区中时无法被飞行时间相机模组检测到;检测区为半径为L2的扇形区域中除了盲区之外的区域,且半径为L1的扇形区域与半径为L2的扇形区域圆心角相同。
在实际应用中,可以根据上述步骤S20和步骤S30确定的参数制造或选用合适的飞行时间相机模组,以适应各种不同的应用场景。
本公开的一些实施例还提供一种显示设备。图7为本公开一些实施例提供的一种显示设备的示意性框图。例如,如图7所示,该显示设备包括设备主体和本公开任一实施例提供的飞行时间相机模组。例如,该飞行时间相机模组设置于设备主体的顶部,例如,飞行时间相机模组的安装和配置可以参考前述应用方法的相关描述,在此不再重复赘述。
例如,如图7所示,设备主体可以包括显示屏。例如,该显示屏可以显示广告内容或者商品信息等。例如,该显示屏可以为触摸屏,本公开的实施例包括但不限于此。例如,该显示屏可以包括LCD显示屏、OLED显示屏等,本公开的实施例对此不作限制。
例如,在一些实施例中,飞行时间相机模组被配置为检测在预定的检测区内是否有人;显示屏被配置为在预定的检测区内没有人的情况下显示广告内容,以及在预定的检测区内有人的情况下显示商品信息。在此情况下,显示设备可以为例如货柜机等,飞行时间相机模组实现距离传感器的功能。由于货柜机摆放位置固定,其前置飞行时间相机模组的视野区域是确定的,预定的检测区可以在前述探测距离L2对应的扇形区域(以下称为“最大探测区域”)内自由设定。由于TOF Sensor可以直接输出距离信息,因此,可以以人体轮廓(例如全身轮廓或上半身轮廓等,但不限于此)作为判定依据,以地面为准,在最大探测区域内识别到人体后进行人体行为轨迹跟踪,当人体进入预定的检测区内,切换显示屏中的播 放画面,例如将广告内容切换为商品信息;当人体离开预定的检测区时,也可以切换显示屏中的播放画面,例如将商品信息切换为广告内容。应当理解的是,由于可以以上半身轮廓作为判定依据,因此,对于一个正常身高(例如大于前述h1)的成年人,即使其位于前述盲区(如图6所示)内,其通常也可以被识别和检测。从而,预定的检测区通常还可以包括上述盲区,以下实施例的情形与此类似,不再重复赘述。
例如,在另一些实施例中,显示屏被配置为显示广告内容;飞行时间相机模组被配置为:检测在预定的检测区内是否有人;在预定的检测区内有人的情况下,为预定的检测区内的每个人提供独立标识,并对每个人进行追踪,统计每个人在预定的检测区内的停留时间,当停留时间大于阈值时,广告阅读量增加1;以及,若在规定时间间隔内,该独立标识消失并重复出现,则广告阅读量不进行重复计数。在此情况下,显示设备可以为例如广告机等。
例如,人体检测逻辑可以如下:1)显示设备运行时,先通过飞行时间相机模组获取背景深度图像;当然,背景深度图像也可以是预先拍摄的;2)然后,通过飞行时间相机模组不断获取深度图像,并可与背景深度图像进行对比,以筛选预定的检测区内新出现的个体;其中,可以利用人体特征(例如,人体轮廓,例如全身轮廓或上半身轮廓等,但不限于此)作为筛选标准;3)当判定该个体符合人体特征时将其标记,并对其进行跟踪。例如,计数逻辑可以如下:判断是否已根据该个体进行计数;若已计数,则持续跟踪直到其走出预定的检测区(例如,从预定的检测区内消失一定时间以上,例如从预定的检测区内消失1s以上,但不限于此),并清除该个体的记录信息;若未计数,则持续跟踪,在该个体在预定的检测区内停止移动时,开始进行计时,当该个体的停留时间大于阈值(例如3s,但不限于此)时,计数增加1(即,广告阅读量增加1),并持续跟踪直到该个体走出预定的检测区。
在实际应用中,有效的广告阅读量的定义可以以客户需求为准。例如,在一个具体示例中,可以将符合以下条件的事项作为一次有效的广告阅读:1)某人处于预定的检测区内;2)该人在预定的检测区内至少停留3s;3)该人在预定的检测区内活动时不进行重复计数。为避免短时间内重复计数,需要对进入预定的检测区的人进行行为轨迹跟踪。
例如,在实际应用中,一种检测方式可以包括:在预定的检测区内检测到人体后开始追踪,然后统计该个体在预定的检测区内的停留时间,若在该区域内停留时间超过3s,则根据该个体进行计数;根据该个体进行计数后,继续追踪其行为轨迹,已计数个体在预定的检测区范围内活动时,不再重复计数。根据ToF的工作原理,被遮挡的人体是无法进行识别的,但是,当该人体从被遮挡状态重新进入飞行时间相机模组的视野后,检测算法可能会重新进行计数作业,由此可能存在一定的错误计数。为改善检测精度,可以给飞行时间相机模组的视野内的每个检测个体(即被检测到的个体)提供独立标识(例如,独立ID),对飞行时间相机模组的视野内突然消失又再出现的个体可判定为同一人,从而可以至少在一定时间范围内不再重复计数。特别地,对于位于飞行时间相机模组的盲区及盲区附近的 个体,其上半身通常可以被检测到,因此,为了增大检测范围,在算法层面上,可以将盲区及盲区附近的个体的人体判定标准设定为上半身轮廓,从而,飞行时间相机模组获取的深度信息足够用于实现人体检测。在此情况下,可以将从显示设备的侧面进入到近距离检测范围内的人统计进去。
图8为本公开一些实施例提供的一种显示设备的检测效果示例图。图8中的四幅子图分别示出了检测距离为3m、4m、5m、6m时的检测图样,铬检测图样中可以实时显示视野内人数和距离信息等。例如,为了更加精确的进行行为分析和统计,检测算法涉及的变量可以包括:当前视野内的人数、总统计人数、当前个体在视野内的总活动时间、当前个体在视野内的停留时间,当前个体的独立标识(独立ID)等。
例如,预定的检测区可以在前述探测距离L2对应的扇形区域(以下称为“最大探测区域”)内自由设定。例如,上述阈值和规定时间间隔均可以根据实际需要进行设置,本公开的实施例对此不作限制。例如,飞行实际相机模组的架设高度以及镜头俯仰角等也可以根据实际需要进行设置,以适应各种不同的应用场景。
本公开的实施例提供的显示设备中的飞行时间相机模组可以满足在复杂多元的环境下减少盲区,进行更广范围的覆盖和检测。显示设备中采用飞行时间相机模组,而不采用RGB摄像头,从而,可以在满足隐私保护的前提下,通过检测算法有效地进行人体跟踪统计和实时的距离反馈。
需要说明的是,本公开的实施例提供的显示设备是示例性的,而非限制性的,根据实际应用需要,该显示设备还可以包括其他常规部件或结构,例如,为实现显示设备的必要功能,本领域技术人员可以根据具体应用场景设置其他的常规部件或结构,本公开的实施例对此不作限制。
对于本公开,有以下几点需要说明:
(1)本公开实施例附图中,只涉及到与本公开实施例涉及到的结构,其他结构可参考通常设计。
(2)在不冲突的情况下,本公开的实施例及实施例中的特征可以相互组合以得到新的实施例。
以上,仅为本公开的具体实施方式,但本公开的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应以权利要求的保护范围为准。
Claims (21)
- 一种飞行时间相机模组,包括:第一承载板、第二承载板、结构支架、红外激光发射模块、镜头、飞行时间传感器;其中,所述第一承载板、所述结构支架和所述第二承载板层叠设置,且所述第一承载板和所述第二承载板分别固定于所述结构支架的两侧,所述红外激光发射模块设置于所述第一承载板的远离所述结构支架的一侧,所述第一承载板包括位于所述红外激光发射模块一侧的镜头通孔,所述结构支架包括对应于所述镜头通孔的支架通孔,所述镜头穿过所述支架通孔,所述飞行时间传感器设置于所述第二承载板上,并被配置为感测所述镜头收集的红外光以生成深度信息。
- 根据权利要求1所述的飞行时间相机模组,还包括:外壳;其中,所述结构支架包括多个楔角,所述外壳包括与所述多个楔角一一对应的楔角安装部,所述结构支架通过所述多个楔角与所述多个楔角安装部的配合固定于所述外壳。
- 根据权利要求1或2所述的飞行时间相机模组,其中,所述红外激光发射模块包括第一红外激光发射模块和第二红外激光发射模块,所述第一红外激光发射模块和所述第二红外激光发射模块并排设置于所述第一承载板的远离所述结构支架的一侧,所述镜头通孔位于所述第二红外激光发射模块的远离所述第一红外激光发射模块的一侧。
- 根据权利要求3所述的飞行时间相机模组,其中,所述第一红外激光发射模块的中心、所述第二红外激光发射模块的中心和所述镜头的中心三者在所述第一承载板上的正投影位于同一直线上。
- 根据权利要求3或4所述的飞行时间相机模组,还包括:前壳;其中,所述前壳包括前表面,所述前表面包括向朝向所述结构支架的方向凹陷的第一凹槽和第二凹槽;所述第一凹槽包括与所述第一红外激光发射模块对应的第一开口以及与所述第二红外激光发射模块对应的第二开口,所述第二凹槽包括与所述镜头对应的第三开口;所述飞行时间相机模组还包括第一滤光片,所述第一滤光片覆盖所述第二凹槽,所述第一滤光片允许与所述第一红外激光发射模块和所述第二红外激光发射模块发射的红外光相同波段的红外光透过。
- 根据权利要求5所述的飞行时间相机模组,还包括:第二滤光片,其中,所述第二滤光片覆盖所述第一凹槽,所述第二滤光片允许与所述第一红外激光发射模块和所述第二红外激光发射模块发射的红外光相同波段的红外光透过。
- 根据权利要求6所述的飞行时间相机模组,其中,所述第一红外激光发射模块与所述第二红外激光发射模块的中心距离为d,所述第一红外激光发射模块与所述第二红外激光发射模块到所述第二滤光片的距离均为h,所述第一红外激光发射模块与所述第二红外激光 发射模块的水平发射角均为a,所述第一红外激光发射模块与所述第二红外激光发射模块的垂直发射角均为b,所述第一盖板在平行于所述第一红外激光发射模块与所述第二红外激光发射模块的中心连线的方向上的尺寸c1和所述第二滤光片在垂直于所述第一红外激光发射模块与所述第二红外激光发射模块的中心连线的方向上的尺寸c2分别满足下述公式:c1>2h*tan(a/2)+d,c2>2h*tan(b/2)。
- 根据权利要求1-7任一项所述的飞行时间相机模组,还包括:连接板、第二柔性电路板和线缆;其中,所述连接板与所述第一承载板通过所述第二柔性电路板进行电连接,所述线缆与所述连接板电连接,所述线缆用于与外部电源和外部设备至少之一连接。
- 根据权利要求8所述的飞行时间相机模组,其中,所述结构支架还包括第四开口以及限位环,所述限位环位于所述结构支架的远离所述第一承载板的一侧,所述第二柔性电路板弯折穿过所述第四开口和所述限位环。
- 根据权利要求1-9任一项所述的飞行时间相机模组,包括:前壳和后壳;其中,所述后壳包括后表面,所述后壳通过所述后表面与所述前壳固定以共同实现整机覆盖;所述前壳包括前表面,所述前表面相对于所述后表面倾斜设置,所述前表面相对于所述后表面的倾斜角的取值范围为[20°,40°]。
- 根据权利要求8所述的飞行时间相机模组,还包括:后壳和后壳堵盖;其中,所述后壳包括第五开口,所述连接板固定于所述后壳且与所述第五开口对应;所述后壳堵盖用于封堵所述第五开口,所述后壳堵盖为中空结构,所述线缆穿过所述中孔结构与所述连接板电连接。
- 根据权利要求1-11任一项所述的飞行时间相机模组,还包括:红外激光电路模块和外壳;其中,所述红外激光电路模块设置于所述第一承载板的远离所述结构支架的一侧;所述红外激光电路模块的远离所述第一承载板的一侧设置有导热胶,所述导热胶被配置为与所述外壳接触,所述外壳的材料包括金属。
- 根据权利要求1-12任一项所述的飞行时间相机模组,还包括:第一柔性电路板;其中,所述第一承载板与所述第二承载板均为印刷电路板,所述第一承载板与所述第二承载板通过所述第一柔性电路板进行电连接。
- 根据权利要求1-13任一项所述的飞行时间相机模组,还包括:运算部件;其中,所述运算部件设置于所述第一承载板上,所述运算部件被配置为根据所述深度信息,确定在所述飞行时间相机模组的视野内的人体的数量、距离、在视野内的总活动时间、在视野内的停留时间至少之一,以及为在所述飞行时间相机模组的视野内的人体设置标识。
- 根据权利要求1-14任一项所述的飞行时间相机模组,其中,所述镜头的水平视场角大于100°,所述镜头的垂直视场角大于80°。
- 根据权利要求1-15任一项所述的飞行时间相机模组,其中,所述第一红外激光发射模块与所述第二红外激光发射模块各自均包括垂直腔面发射激光器和扩束器,所述垂直腔面发射激光器的发射功率为1~1.4W,所述垂直腔面发射激光器的水平发射角大于或等于95°,所述垂直腔面发射激光器的垂直发射角大于或等于75°,所述飞行时间相机模组的最大探测距离为5-7m。
- 根据权利要求1-16任一项所述的飞行时间相机模组,其中,所述飞行时间相机模组的安装高度为H,所述镜头的垂直视场角为α,所述飞行时间相机模组的镜头俯仰角为θ,所述飞行时间相机模组的探测距离范围为[L1,L2],所述飞行时间相机模组在探测距离L1处的探测高度范围为[h1,h2],且满足下述公式关系:tan(α/2-θ)*L1+H>h2,H-tan(α/2+θ)*L1<h1。
- 根据权利要求17所述的飞行时间相机模组,其中,L1的取值范围为0.3-0.7m,L2的取值范围为5-7m,h1的取值范围为1-1.2m,h2的取值范围为1.9-2.3m。
- 一种显示设备,包括:设备主体和根据权利要求1-18任一项所述的飞行时间相机模组,其中,所述飞行时间相机模组设置于所述设备主体的顶部,所述设备主体包括显示屏。
- 根据权利要求19所述的显示设备,其中,所述飞行时间相机模组被配置为检测在预定的检测区内是否有人,所述显示屏被配置为在所述预定的检测区内没有人的情况下显示广告内容,以及在所述预定的检测区内有人的情况下显示商品信息。
- 根据权利要求19所述的显示设备,其中,所述显示屏被配置为显示广告内容;所述飞行时间相机模组被配置为:检测在预定的检测区内是否有人,在所述预定的检测区内有人的情况下,为所述预定的检测区内的每个人提供独立标识,并对每个人进行追踪,统计每个人在所述预定的检测区内的停留时间,当停留时间大于阈值时,广告阅读量增加1;以及若在规定时间间隔内,所述独立标识消失并重复出现,则广告阅读量不进行重复计数。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2021/126396 WO2023070313A1 (zh) | 2021-10-26 | 2021-10-26 | 飞行时间相机模组及显示设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117321381A true CN117321381A (zh) | 2023-12-29 |
Family
ID=86158964
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202180003077.2A Pending CN117321381A (zh) | 2021-10-26 | 2021-10-26 | 飞行时间相机模组及显示设备 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN117321381A (zh) |
WO (1) | WO2023070313A1 (zh) |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106291574B (zh) * | 2016-09-10 | 2019-04-02 | 北醒(北京)光子科技有限公司 | 一种小型红外测距装置 |
CN207650913U (zh) * | 2017-09-11 | 2018-07-24 | 深圳市三通特发科技有限公司 | 一种触控型数字智能玻璃显示的自动售货机 |
CN208014266U (zh) * | 2018-01-02 | 2018-10-26 | 广东奥森智能科技有限公司 | 一种智能型广告机 |
CN108174075A (zh) * | 2018-02-28 | 2018-06-15 | 信利光电股份有限公司 | 一种tof摄像模组以及电子设备 |
KR102488006B1 (ko) * | 2018-03-20 | 2023-01-12 | 엘지이노텍 주식회사 | 카메라 모듈 및 이를 포함하는 광학 기기 |
DE102018207294A1 (de) * | 2018-05-09 | 2019-11-14 | Ibeo Automotive Systems GmbH | LIDAR Messsystem und Verfahren zur Montage eines LIDAR Messsystems |
CN110568418A (zh) * | 2018-06-06 | 2019-12-13 | 南昌欧菲生物识别技术有限公司 | 光电模组及电子装置 |
CN109005348A (zh) * | 2018-08-22 | 2018-12-14 | Oppo广东移动通信有限公司 | 电子装置和电子装置的控制方法 |
CN109040556A (zh) * | 2018-08-22 | 2018-12-18 | Oppo广东移动通信有限公司 | 成像装置及电子设备 |
CN111050029A (zh) * | 2018-10-11 | 2020-04-21 | 南昌欧菲生物识别技术有限公司 | 成像模组和电子装置 |
CN109737868A (zh) * | 2018-12-21 | 2019-05-10 | 华为技术有限公司 | 飞行时间模组及电子设备 |
CN110412540B (zh) * | 2019-07-30 | 2022-05-13 | Oppo广东移动通信有限公司 | 光发射模组、飞行时间相机和电子装置 |
CN212992427U (zh) * | 2020-09-24 | 2021-04-16 | 深圳福鸽科技有限公司 | 一种图像采集模组 |
-
2021
- 2021-10-26 CN CN202180003077.2A patent/CN117321381A/zh active Pending
- 2021-10-26 WO PCT/CN2021/126396 patent/WO2023070313A1/zh active Application Filing
Also Published As
Publication number | Publication date |
---|---|
WO2023070313A1 (zh) | 2023-05-04 |
WO2023070313A9 (zh) | 2023-07-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110352364B (zh) | 多光谱照射和传感器模块 | |
CN110337598B (zh) | 使用立体消歧的单频飞行时间深度计算 | |
US9817159B2 (en) | Structured light pattern generation | |
CN110099226B (zh) | 阵列摄像模组及其深度信息采集方法和电子设备 | |
CN109819144B (zh) | Tof摄像模组及其设计方法 | |
CN105681687B (zh) | 图像处理设备以及包括图像处理设备的移动相机 | |
CN111679289B (zh) | 一种深度计算系统、方法及计算机可读存储介质 | |
CN106778641A (zh) | 视线估计方法及装置 | |
CN109005348A (zh) | 电子装置和电子装置的控制方法 | |
CN117321381A (zh) | 飞行时间相机模组及显示设备 | |
US11734833B2 (en) | Systems and methods for detecting movement of at least one non-line-of-sight object | |
CN111510700A (zh) | 图像采集装置 | |
CN213091888U (zh) | 深度测量系统及电子设备 | |
CN211060850U (zh) | 深度检测系统及其支架和电子装置 | |
EP3987248B1 (en) | Projecting a structured light pattern from an apparatus having an oled display screen | |
CN112968350A (zh) | 一种激光设备和电子设备 | |
EP4325433A1 (en) | Augmented reality device and method for acquiring depth map using depth sensor | |
WO2022202775A1 (en) | Imaging device, imaging method, and information processing device | |
CN214478421U (zh) | 一种激光设备和电子设备 | |
WO2022202536A1 (en) | Information processing apparatus and information processing method | |
CN210072643U (zh) | 光学装置以及具有光学装置的智能系统 | |
CN109974611B (zh) | 深度检测系统及其支架和电子装置 | |
JP7120365B1 (ja) | 撮像装置、撮像方法および情報処理装置 | |
WO2021253308A1 (zh) | 图像采集装置 | |
US11567565B2 (en) | Sensor and use of a sensor in a 3-D position detection system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |