CN112929516B - 图像采集模组、终端设备、图像处理方法及装置 - Google Patents

图像采集模组、终端设备、图像处理方法及装置 Download PDF

Info

Publication number
CN112929516B
CN112929516B CN201911236873.1A CN201911236873A CN112929516B CN 112929516 B CN112929516 B CN 112929516B CN 201911236873 A CN201911236873 A CN 201911236873A CN 112929516 B CN112929516 B CN 112929516B
Authority
CN
China
Prior art keywords
light emitting
emitting devices
acquisition module
image acquisition
emission mode
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911236873.1A
Other languages
English (en)
Other versions
CN112929516A (zh
Inventor
李慧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN201911236873.1A priority Critical patent/CN112929516B/zh
Publication of CN112929516A publication Critical patent/CN112929516A/zh
Application granted granted Critical
Publication of CN112929516B publication Critical patent/CN112929516B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/271Image signal generators wherein the generated image signals comprise depth maps or disparity maps
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Optical Radar Systems And Details Thereof (AREA)
  • Measurement Of Optical Distance (AREA)

Abstract

本公开是关于一种图像采集模组、终端设备、图像处理方法及装置,该图像采集模组,包括:至少两个光发射装置,其中,所述图像采集模组具有不同的发射模式,且在不同的发射模式下至少两个所述光发射装置的发射状态不同;光接收装置,用于接收被目标对象反射回的光脉冲;图像处理装置,用于基于被目标对象反射回的光脉冲来生成深度图像。通过本公开实施例,能够通过灵活控制图像采集模组中光发射装置的状态来满足不同场景需求。

Description

图像采集模组、终端设备、图像处理方法及装置
技术领域
本公开涉及图像采集技术领域,尤其涉及一种图像采集模组、终端设备、图像处理方法及装置。
背景技术
随着摄像技术的发展以及终端设备功能丰富化的需求不断提升,在终端设备上安装图像采集模组如飞行时间法三维成像(3D TOF)模组成为了终端设备的一个重要发展趋势。然而,现有的图像采集模组的采集形式单一,不能满足不同场景的需求。
发明内容
本公开提供一种图像采集模组、终端设备、图像处理方法及装置。
本公开实施例第一方面,提供一种图像采集模组,包括:
至少两个光发射装置,用于向目标对象发射光脉冲,其中,所述图像采集模组具有不同的发射模式,且在不同的发射模式下所述至少两个光发射装置的发射状态不同;
光接收装置,用于接收被目标对象反射回的光脉冲;
图像处理装置,用于基于被目标对象反射回的光脉冲来生成深度图像。
在一些实施例中,在所述图像采集模组处于第一发射模式时,至少两个所述光发射装置中一个所述光发射装置发射光脉冲;
或者,
在所述图像采集模组处于第二发射模式下,M1个所述光发射装置同时发射光脉冲;
或者,
在所述图像采集模组处于第三发射模式下,M2个所述光发射装置交替发射光脉冲;
其中,M1为大于或者等于2且小于或等于N的正整数,M2为大于或者等于2且小于或等于N的正整数,N为所述光发射装置的总数,N为大于或等于2的正整数。
在一些实施例中,在所述第二发射模式下,M1个所述光发射装置发射光脉冲的频率相同。
在一些实施例中,至少两个所述光发射装置中各所述光发射装置的视场角不同;
和/或,
至少两个所述光发射装置中各所述光发射装置的发射距离功率不同;
和/或,
至少两个所述光发射装置中两个所述光发射装置的视场角范围至少部分重叠。
在一些实施例中,所述光接收装置位于至少两个所述光发射装置之间。
在一些实施例中,至少两个所述光发射装置中各所述光发射装置用于发射激光信号。
在一些实施例中,所述图像采集模组还包括:
用于驱动至少两个所述光发射装置的驱动电路;
至少两个所述光发射装置连接在所述驱动电路的后端。
本公开实施例第二方面,提供一种终端设备,包括:
上述第一方面的图像采集模组;
印制电路板;
柔性电路板,与所述图像采集模组及所述印制电路板相连,用于将所述印制电路板的控制信号输入至所述图像采集模组;
所述图像采集模组,用于基于所述控制信号,控制所述图像采集模组中的至少两个光发射装置的当前发射模式。
本公开实施例第三方面,提供一种图像处理方法,应用于第二方面的终端设备,包括:
检测所述终端设备中图像采集模组的当前发射模式;
基于所述当前发射模式,控制所述图像采集模组中至少两个光发射装置发射光脉冲;
基于所述图像采集模组中的光接收装置,采集被目标对象反射回的光脉冲,并基于所述反射回的光脉冲生成深度图像。
在一些实施例中,所述基于所述当前发射模式,控制所述图像采集模组中至少两个光发射装置发射光脉冲,包括:
在所述当前发射模式为第一发射模式时,控制至少两个所述光发射装置中的一个所述光发射装置发射光脉冲;
在所述当前光发射装置为第二发射模式时,控制M1个所述光发射装置同时发射光脉冲;
在所述当前光发射装置为第三发射模式时,控制M2个所述光发射装置交替发射光脉冲;
其中,M1为大于或者等于2且小于或等于N的正整数,M2为大于或者等于2且小于或等于N的正整数,N为所述光发射装置的总数,N为大于或等于2的正整数。
本公开实施例第四方面,提供一种图像处理装置,包括:
检测模块,配置为检测终端设备中图像采集模组的当前发射模式;
控制模块,配置为基于所述当前发射模式,控制所述图像采集模组中至少两个光发射装置发射光脉冲;
采集模块,配置为基于所述图像采集模组中的光接收装置,采集被目标对象反射回的光脉冲,并基于所述反射回的光脉冲生成深度图像。
在一些实施例中,所述控制模块,具体配置为在所述当前发射模式为第一发射模式时,控制至少两个所述光发射装置中的一个所述光发射装置发射光脉冲;在所述当前光发射装置为第二发射模式时,控制M1个所述光发射装置同时发射光脉冲;在所述当前光发射装置为第三发射模式时,控制M2个所述光发射装置交替发射光脉冲;
其中,M1大于或者等于2且小于或等于N的正整数,M2为大于或者等于2且小于或等于N的正整数,N为所述光发射装置的总数,N为大于或等于2的正整数。
本公开的实施例提供的技术方案可以包括以下有益效果:
通过本公开实施例的图像采集模组具有不同的发射模式,且在不同的发射模式下发射光脉冲的光发射装置的状态不同,能够通过灵活控制图像采集模组中光发射装置的状态来满足不同场景需求;同时,在需要远距离大视场角的图像采集模组时,本公开实施例可以通过使得至少两个图像采集模组同时发送光脉冲,而不需要通过增加单个光发射装置的发射功率的形式来提高远距离的需求,减少了因单个光发射装置的发射功率过高,导致产热集中使得出现终端局部温度过高的现象。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
图1是根据一示例性实施例示出的一种图像采集模组的示意图一。
图2是根据一示例性实施例示出的一种图像采集模组的示意图二。
图3是根据一示例性实施例示出的现有图像采集模组的示意图一。
图4是根据一示例性实施例示出的现有图像采集模组的示意图二。
图5是根据一示例性实施例示出的光发射装置时序图一。
图6是根据一示例性实施例示出的光发射装置时序图二。
图7是根据一示例性实施例示出的光发射装置时序图三。
图8是根据一示例性实施例示出的光发射装置时序图四。
图9是根据一示例性实施例示出的一种图像采集模组的示意图三。
图10是根据一示例性实施例示出的一种终端设备的结构示意图。
图11是根据一示例性实施例示出的一种图像处理方法的流程示意图一。
图12是根据一示例性实施例示出的一种图像采集处理的流程示意图二。
图13是根据一示例性实施例示出的一种图像处理装置示意图。
图14是根据一示例性实施例示出的一种终端设备的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
图1是根据一示例性实施例示出的一种图像采集模组的示意图一。如图1所示,图像采集模组包括:
至少两个光发射装置101,用于向目标对象发射光脉冲,其中,所述图像采集模组具有不同的发射模式,且在不同的发射模式下所述至少两个光发射装置的发射状态不同;
光接收装置102,用于接收被目标对象反射回的光脉冲;
图像处理装置,用于基于被所述目标对象反射回的光脉冲来生成深度图像。
在图1的基础上,图2为图像采集模组的侧视图,上述图像采集模组用于获取目标对象的深度图像,其广泛的应用于物流行业如获取包裹的体积、机器视觉如工业定位以及终端设备如手机的三维面部识别等。图像采集模组包括TOF图像采集模组或者结构光图像采集模组,本公开实施例不作限制。
上述图像采集模组除了包括光发射装置和光接收装置,还包括处理模组。光发射装置用于向目标对象连续发射光脉冲;光接收装置采集被目标对象反射回的光脉冲;处理模组用于基于反射回的光脉冲生成深度图像。
在一些实施例中,至少两个光发射装置中各光发射装置用于发射激光信号。
本公开实施例中,基于反射回的光脉冲生成深度图像,包括:记录发射光脉冲的时间以及接收反射回的光脉冲的时间;根据发射光脉冲与接收反射回的光脉冲之间的时间差和光脉冲的传输速度,确定目标对象的各点与图像采集模组之间的距离;基于目标对象的各点与图像采集模组之间的距离,获取目标对象的深度图像。
如图3和图4所示,3a和4a为图像采集模组的正视图,3b和4b为图像采集模组的侧视图,现有图像采集模组如图像采集模组,其由一个光发射装置101和一个光接收装置102组成。由于该图像采集模组只有一个光发射装置,当需要通过光脉冲测量更远的目标对象时,需要通过增加该光发射装置的发射电功率来提高光发射装置的发射光功率,进而才能得到更远目标对象的深度图像,因此,现有的图像采集模组并不能满足采集不同远近的目标对象的场景需求。同时,现有的图像采集模组中一个光发射装置的视场角是固定的,其也不能满足大视场角的场景需求。
基于此,本公开实施例提出的光发射装置为至少两个,且图像采集模组在不同的发射模式下发射光脉冲的光发射装置的状态不同。该发射模式包括但不限于第一距离第一视场角的发射模式或者第二距离第二视场角的发射模式,第一距离大于第二距离,第一视场角小于第二视场角。例如,在图像采集模组处于第一距离第一视场角的发射模式时,本公开实施例可以使得至少两个光发射装置同时发射光脉冲,进而使得光脉冲能够叠加,进而得到更远的目标对象的深度图像,而并不需要通过增加电功率的方式来增加光功率以实现更远目标对象的测距,减少图像采集模组所需的功耗,满足低功耗的需求;在图像采集模组处于第二距离第二视场角的发射模式时,本公开实施例可以通过比较至少两个光发射装置的视场角,采用具有第二视场角的光发射装置发射光脉冲,或者也可以通过同时使得两个光发射装置发射光脉冲,以扩大发射视场角。
如此,通过本公开实施例的图像采集模组具有不同的发射模式,且在不同的发射模式下发射光脉冲的光发射装置的状态不同,能够通过灵活控制图像采集模组处于不同的发射模式来满足不同场景需求。同时,在需要远距离大视场角的图像采集模组时,本公开实施例可以通过使得至少两个图像采集模组同时发送光脉冲,而不需要通过增加单个光发射装置的发射功率的形式来提高远距离的需求,减少了因单个光发射装置的发射功率过高,导致产热集中使得出现终端局部温度过高的现象。
在一些实施例中,在图像采集模组处于第一发射模式时,至少两个光发射装置中一个光发射装置发射光脉冲;
或者,
在图像采集模组处于第二发射模式下,M1个光发射装置同时发射光脉冲;
或者,
在图像采集模组处于第三发射模式下,M2个光发射装置交替发射光脉冲;
其中,M1为大于或者等于2且小于或等于N的正整数,M2为大于或者等于2且小于或等于N的正整数,N为光发射装置的总数,N为大于或等于2的正整数。
本公开实施例中,图像采集模组至少具有三种不同发射模式,上述第一发射模式对应至少两个光发射装置中一个光发射装置发射光脉冲。该第一发射模式适应于普通的图像采集需求,通过一个光发射装置就可以得到满足用户需求的深度图像。
上述第二发射模式对应至少两个光发射装置中M1个光发射装置同时发射光脉冲。该第二发射模式适用于需要远距离大视场角的场景。该M1可以依据所需的视场角的大小以及目标对象与图像采集模组的远近距离来设置。例如,假设第一视场角大于第二视场角,第一距离大于第二距离;在图像采集模组需要满足第一视场角和第一距离的情况下,M1可以设置为等于N;在图像采集模组需要满足第二视场角和第二距离的情况下,M1可以设置为小于N。也就是说,本公开实施例可以实现至少两个光发射装置中所有的光发射装置同时发射光脉冲,也可以实现至少两个光发射装置中部分光发射装置发射光脉冲,使得图像采集模组能够更加灵活的同时发射光脉冲,进一步地增加了图像采集模组的应用场景。
上述第三发射模式对应至少两个光发射装置中M2个光发射装置交替发射光脉冲,适应于采集目标对象在不同位置的深度图像场景。上述M2的取值可以根据实际需求进行设置,M2可以设置为等于N,也可以设置为小于N。也就是说,本公开实施例可以实现至少两个光发射装置中所有的光发射装置在时域上交替发射光脉冲,也可以实现至少两个光发射装置中部分光发射装置在时域上交替发射光脉冲,使得图像采集模组能够得到目标对象在不同位置的深度图像,进一步增加了图像采集模组的应用场景。
示例性地,当目标对象与图像采集模组之间的距离在2米至5米范围内,可以使得图像采集模组处于第一发射模式;当目标对象与图像采集模组之间的距离超过10米时,可以使得图像采集模组处于第二发射模式;当图像采集模组采集不同位置的目标对象时,可以使得图像采集模组处于第三发射模式,本公开实施例不作限制。
需要说明的是,假设至少两个光发射装置包括第一光发射装置和第二光发射装置,第一光发射装置和第二光发射装置均为发射脉冲光脉冲。在第一发射模式下,第一光发射装置和第二光发射装置中的一个光发射装置发射光脉冲,即第一光发射装置和第二光发射装置分别单独发射光脉冲。此时,第一光发射装置11发射光脉冲对应的脉冲时序图如图5所示,第二光发射装置12发射光脉冲对应的脉冲时序图如图6所示,第二光发射装置12可在处于上升沿时发射光脉冲。
如图7所示,在第二发射模式下,第一光发射装置11和第二光发射装置12同时发射光脉冲,第一光发射装置11和第二光发射装置12两者发射光脉冲的起始时间和频率均相同,具有相同的上升沿,如此,第一光发射装置11和第二光发射装置12能够在每个脉冲周期中实现同时发射光脉冲。
如图8所示,在第三发射模式下,第一光发射装置11和第二光发射装置12交替分时工作,第一光发射装置11在第一时段发射光脉冲,第二光发射装置12在第二时段发射光脉冲。需要说明的是,第一光发射装置11和第二光发射装置12在交替发射光脉冲时的频率可以相同,也可以不同,本公开实施例不作限制。
在一些实施例中,在第二发射模式下,M1个光发射装置发射光脉冲的频率相同。
本公开实施例,光发射装置发射的光脉冲为脉冲光脉冲,并不是发射连续的光脉冲。因此,在M1个光发射装置同时发射光脉冲后,还需要调制M1个光发射装置的频率使得M1个光发射装置的时钟同步,进而可以减少因时钟不同步导致的发射光脉冲与接收反射回的光脉冲之间的时间差存在不准确的情况,提高了测距的精确度。
在一些实施例中,至少两个光发射装置中各光发射装置的视场角不同;
和/或,
至少两个光发射装置中各光发射装置的发射功率不同;
和/或,
至少两个光发射装置中两个光发射装置的视场角范围至少部分重叠。
上述至少两个光发射装置中各光发射装置的视场角不同,可以满足不同视场角场景的需求,例如,至少两个光发射装置包括具有第一视场角的第一光发射装置和具有第二视场角的第二光发射装置,在需要第一视场角时,可以使得第一光发射装置发射光脉冲;在需要第二视场角时,可以使得第二光发射装置发射光脉冲;当需要更大的视场角时,可以使得第一光发射装置和第二光发射装置同时发射光脉冲以增加视场角。
上述至少两个光发射装置中各光发射装置的发射功率不同。需要说明的是,这里的发射功率为光发射装置的发射光功率,光发射装置的发射光功率越大,光发射装置发射光脉冲的衰减越慢,进而光脉冲可以传播的更远。因此,可以通过选择光发射装置的不同发射功率使得光发射装置满足不同发射功率需求,还可以通过光发射装置的不同发射功率和不同视场角的组合,以增加至少两个光发射装置的应用场景,提高了用户体验感。
上述至少两个光发射装置中两个光发射装置的视场角范围至少部分重叠,第一方面,当该两个光发射装置同时发射光脉冲时,两个光发射装置的视场角之间的重叠区域的光脉冲对应的光功率叠加,使得光脉冲传播的更远,实现了获取远距离的深度图像;第二方面,相对于一个光发射装置对应一个视场角,本公开实施例通过重叠视场角的光发射装置同时发射光脉冲可以增大光发射装置的视场角,实现了获取大视场角的深度图像;第三方面,相对于一个光发射装置对应的一个视场角,本公开实施例通过重叠视场角的光发射装置同时发射视场角,可以使得重叠区域的光脉冲更加均匀,形成的边缘光斑更亮,进而提升了深度图像的质量。
通过本公开实施例,可以通过光发射装置的不同视场角和不同发射功率的组合,适应于不同距离和不同视场角场景,满足不同应用需求,还可以通过设置不同光发射装置的视场角,使得任意两个光发射装置的视场角范围至少部分重叠,进而在该两个光发射装置同时发射光脉冲时,能够得到更大视场角和更远距离的深度图像。
在一些实施例中,光接收装置位于至少两个光发射装置之间。
如图9所示,9a为图像采集模组的正视图,9b为图像采集模组的侧视图。当至少两个光发射装置为两个光发射装置时,光接收装置102设置在两个光发射装置101之间。
通过本公开实施例,将光接收装置设置在至少两个光发射装置之间,可以实现至少两个光发射装置发射的光脉冲被目标对象反射回后,被同一个光接收装置采集,即多个光发射装置可以共用一个光接收装置。可见,相对于设置多个光接收装置,本公开实施例能够减少光接收装置的设置个数,简化了图像采集模组的结构设计,同时降低了图像采集模组占用终端设备的空间,提高了终端设备的空间利用率。
在一些实施例中,图像采集模组还包括:
用于驱动至少两个光发射装置的驱动电路;
至少两个光发射装置连接在驱动电路的后端。
本公开实施例中,驱动电路用于驱动至少两个光发射装置发射光脉冲,该驱动电路可以同时驱动至少两个光发射装置中各光发射装置发射光脉冲,可以驱动至少两个光发射装置中一个光发射装置发射光脉冲,还可以驱动至少两个光发射装置分时交替发射光脉冲,本公开实施例不作限制。
需要说明的是,至少两个光发射装置可以并联设置,在相同电功率输入的情况下,热量分散到了至少两个光发射装置上,使得至少两个光发射装置热密度减小,有利于散热;同时,通过使得至少两个光发射装置并联可以使得流经各个光发射装置的电流变小,进而实现各个光发射装置的热损耗小,提高了光发射装置的电功率转化为光功率的转换效率高。
图10是根据一示例性实施例示出的一种终端设备的结构示意图。如图10所示,终端设备包括:
上述一种或多种实施例提及的图像采集模组201;
印制电路板;
柔性电路板202,与图像采集模组及印制电路板相连,用于将印制电路板的控制信号输入至图像采集模组;
图像采集模组201,用于基于控制信号,控制图像采集模组中的至少两个光发射装置的当前发射模式。
上述终端设备包括移动终端设备和可穿戴式设备,该移动终端设备包括手机、笔记本和电脑;该可穿戴式设备包括智能手表,本公开实施例不作限制。
通过本公开实施例的图像采集模组具有不同的发射模式,且在不同的发射模式下发射光脉冲的光发射装置的状态不同,能够通过灵活控制图像采集模组的发射模式来满足不同场景需求;同时,在需要远距离大视场角的图像采集模组时,本公开实施例可以通过使得至少两个图像采集模组同时发送光脉冲,而不需要通过增加功率的形式来提高远距离的需求,进而减少了图像采集模组所需的功耗,也减少了因增加功率而导致温升变高的情况。
图11是根据一示例性实施例示出的一种图像处理方法的流程示意图一。如图11所示,该图像处理方法应用于上述终端设备,该终端设备执行图像处理方法包括以下步骤:
S301、检测终端设备中图像采集模组的当前发射模式;
S302、基于当前发射模式,控制图像采集模组中至少两个光发射装置发射光脉冲;
S303、基于图像采集模组中的光接收装置,采集被目标对象反射回的光脉冲,并基于反射回的光脉冲生成深度图像。
在一些实施例中,如图12所示,基于当前发射模式,控制图像采集模组中至少两个光发射装置发射光脉冲,即步骤S302,包括:
S302a、在当前发射模式为第一发射模式时,控制至少两个光发射装置中的一个光发射装置发射光脉冲;
S302b、在当前光发射装置为第二发射模式时,控制M1个光发射装置同时发射光脉冲;
S302c、在当前光发射装置为第三发射模式时,控制M2个光发射装置交替发射光脉冲;
其中,M1为大于或者等于2且小于或等于N的正整数,M2为大于或者等于2且小于或等于N的正整数,N为光发射装置的总数,N为大于或等于2的正整数。
关于上述实施例中的方法已经在有关该终端设备或者图像采集模组的实施例中进行了详细描述,此处将不做详细阐述说明。
图13是根据一示例性实施例示出的一种图像处理装置示意图。如图13所示,该图像处理装置400包括:
检测模块401,配置为检测终端设备中图像采集模组的当前发射模式;
控制模块402,配置为基于所述当前发射模式,控制所述图像采集模组中至少两个光发射装置发射光脉冲;
采集模块403,配置为基于所述图像采集模组中的光接收装置,采集被目标对象反射回的光脉冲,并基于所述反射回的光脉冲生成深度图像。
在一些实施例中,所述控制模块,具体配置为在所述当前发射模式为第一发射模式时,控制至少两个所述光发射装置中的一个所述光发射装置发射光脉冲;在所述当前光发射装置为第二发射模式时,控制M1个所述光发射装置同时发射光脉冲;在所述当前光发射装置为第三发射模式时,控制M2个所述光发射装置交替发射光脉冲;
其中,M1大于或者等于2且小于或等于N的正整数,M2为大于或者等于2且小于或等于N的正整数,N为所述光发射装置的总数,N为大于或等于2的正整数。
需要说明的是,本公开实施例中的“第一”、“第二”和“第三”仅为表述和区分方便,并无其他特指含义。
图14是根据一示例性实施例示出的一种终端设备的框图。例如,终端设备可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
参照图14,终端设备可以包括以下一个或多个组件:处理组件802,存储器804,电力组件806,多媒体组件808,音频组件810,输入/输出(I/O)的接口812,传感器组件814,以及通信组件816。
处理组件802通常控制终端设备的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件802可以包括一个或多个处理器820来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件802可以包括一个或多个模块,便于处理组件802和其他组件之间的交互。例如,处理组件802可以包括多媒体模块,以方便多媒体组件808和处理组件802之间的交互。
存储器804被配置为存储各种类型的数据以支持在终端设备的操作。这些数据的示例包括用于在终端设备上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电力组件806为终端设备的各种组件提供电力。电力组件806可以包括电源管理系统,一个或多个电源,及其他与为终端设备生成、管理和分配电力相关联的组件。
多媒体组件808包括在终端设备和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件808包括一个前置摄像头和/或后置摄像头。当终端设备处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。在一些实施例中,多媒体组件808还包括至少两个光发射装置和光接收装置,用于生成深度图像。
音频组件810被配置为输出和/或输入音频信号。例如,音频组件810包括一个麦克风(MIC),当终端设备处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中,音频组件810还包括一个扬声器,用于输出音频信号。
I/O接口812为处理组件802和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件814包括一个或多个传感器,用于为终端设备提供各个方面的状态评估。例如,传感器组件814可以检测到终端设备的打开/关闭状态,组件的相对定位,例如组件为终端设备的显示器和小键盘,传感器组件814还可以检测终端设备或终端设备一个组件的位置改变,用户与终端设备接触的存在或不存在,终端设备方位或加速/减速和终端设备的温度变化。传感器组件814可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件814还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件816被配置为便于终端设备和其他设备之间有线或无线方式的通信。终端设备可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件816经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,通信组件816还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,终端设备可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由下面的权利要求指出。
应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (12)

1.一种图像采集模组,其特征在于,包括:
至少两个光发射装置,用于向目标对象发射光脉冲,其中,所述图像采集模组具有不同的发射模式,且在不同的发射模式下所述至少两个光发射装置的发射状态不同;其中,所述发射模式包括以下至少之一模式:至少两个所述光发射装置中一个所述光发射装置发射光脉冲的第一发射模式,至少两个所述光发射装置中至少两个所述光发射装置同时发射光脉冲的第二发射模式,以及至少两个所述光发射装置中至少两个所述光发射装置交替发射光脉冲的第三发射模式;所述发射状态包括:视场角不同和/或发射功率不同;其中,所述图像采集模组用于基于当前发射模式,控制所述图像采集模组中至少两个所述光发射装置发射光脉冲;
光接收装置,用于接收被目标对象反射回的光脉冲;
图像处理装置,用于基于被所述目标对象反射回的光脉冲来生成深度图像。
2.根据权利要求1所述的图像采集模组,其特征在于,
在所述图像采集模组处于所述第一发射模式时,至少两个所述光发射装置中一个所述光发射装置发射光脉冲;
或者,
在所述图像采集模组处于所述第二发射模式下,M1个所述光发射装置同时发射光脉冲;
或者,
在所述图像采集模组处于所述第三发射模式下,M2个所述光发射装置交替发射光脉冲;
其中,M1为大于或者等于2,且小于或等于N的正整数,M2为大于或者等于2,且小于或等于N的正整数,N为所述光发射装置的总数,N为大于或等于2的正整数。
3.根据权利要求2所述的图像采集模组,其特征在于,在所述第二发射模式下,M1个所述光发射装置发射光脉冲的频率相同。
4.根据权利要求1至3任一项所述的图像采集模组,其特征在于,至少两个所述光发射装置中各所述光发射装置的视场角不同;
和/或,
至少两个所述光发射装置中各所述光发射装置的发射功率不同;
和/或,
至少两个所述光发射装置中两个所述光发射装置的视场角范围至少部分重叠。
5.根据权利要求1至3任一项所述的图像采集模组,其特征在于,所述光接收装置位于至少两个所述光发射装置之间。
6.根据权利要求1至3任一项所述的图像采集模组,其特征在于,至少两个所述光发射装置中各所述光发射装置用于发射激光信号。
7.根据权利要求1至3任一项所述的图像采集模组,其特征在于,所述图像采集模组还包括:
用于驱动至少两个所述光发射装置的驱动电路;
至少两个所述光发射装置连接在所述驱动电路的后端。
8.一种终端设备,其特征在于,所述终端设备包括:
权利要求1至7任一项所述的图像采集模组;
印制电路板;
柔性电路板,与所述图像采集模组及所述印制电路板相连,用于将所述印制电路板的控制信号输入至所述图像采集模组;
所述图像采集模组,用于基于所述控制信号,控制所述图像采集模组中的至少两个光发射装置的当前发射模式。
9.一种图像处理方法,应用于权利要求8中的所述终端设备,其特征在于,所述方法包括:
检测所述终端设备中图像采集模组的当前发射模式和不同光发射装置的发射状态;其中,所述发射模式包括以下至少之一模式:至少两个所述光发射装置中一个所述光发射装置发射光脉冲的第一发射模式,至少两个所述光发射装置中至少两个所述光发射装置同时发射光脉冲的第二发射模式,以及至少两个所述光发射装置中至少两个所述光发射装置交替发射光脉冲的第三发射模式;所述发射状态包括:视场角不同和/或发射功率不同;
基于所述当前发射模式,控制所述图像采集模组中至少两个所述光发射装置发射光脉冲;
基于所述图像采集模组中的光接收装置,采集被目标对象反射回的光脉冲,并基于所述反射回的光脉冲生成深度图像。
10.根据权利要求9所述的方法,其特征在于,所述基于所述当前发射模式,控制所述图像采集模组中至少两个光发射装置发射光脉冲,包括:
在所述当前发射模式为第一发射模式时,控制至少两个所述光发射装置中的一个所述光发射装置发射光脉冲;
在所述当前发射模式为第二发射模式时,控制M1个所述光发射装置同时发射光脉冲;
在所述当前发射模式为第三发射模式时,控制M2个所述光发射装置交替发射光脉冲;
其中,M1大于或者等于2且小于或等于N的正整数,M2为大于或者等于2且小于或等于N的正整数,N为所述光发射装置的总数,N为大于或等于2的正整数。
11.一种图像处理装置,其特征在于,所述图像处理装置包括:
检测模块,配置为检测终端设备中图像采集模组的当前发射模式;其中,所述发射模式包括以下至少之一模式:至少两个光发射装置中一个所述光发射装置发射光脉冲的第一发射模式,至少两个所述光发射装置中至少两个所述光发射装置同时发射光脉冲的第二发射模式,以及至少两个所述光发射装置中至少两个所述光发射装置交替发射光脉冲的第三发射模式;发射状态包括:视场角不同和/或发射功率不同;
控制模块,配置为基于所述当前发射模式,控制所述图像采集模组中至少两个所述光发射装置发射光脉冲;
采集模块,配置为基于所述图像采集模组中的光接收装置,采集被目标对象反射回的光脉冲,并基于所述反射回的光脉冲生成深度图像。
12.根据权利要求11所述的装置,其特征在于,所述控制模块,具体配置为在所述当前发射模式为第一发射模式时,控制至少两个所述光发射装置中的一个所述光发射装置发射光脉冲;在所述当前发射模式为第二发射模式时,控制M1个所述光发射装置同时发射光脉冲;在所述当前发射模式为第三发射模式时,控制M2个所述光发射装置交替发射光脉冲;
其中,M1大于或者等于2且小于或等于N的正整数,M2为大于或者等于2且小于或等于N的正整数,N为所述光发射装置的总数,N为大于或等于2的正整数。
CN201911236873.1A 2019-12-05 2019-12-05 图像采集模组、终端设备、图像处理方法及装置 Active CN112929516B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911236873.1A CN112929516B (zh) 2019-12-05 2019-12-05 图像采集模组、终端设备、图像处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911236873.1A CN112929516B (zh) 2019-12-05 2019-12-05 图像采集模组、终端设备、图像处理方法及装置

Publications (2)

Publication Number Publication Date
CN112929516A CN112929516A (zh) 2021-06-08
CN112929516B true CN112929516B (zh) 2023-08-08

Family

ID=76162358

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911236873.1A Active CN112929516B (zh) 2019-12-05 2019-12-05 图像采集模组、终端设备、图像处理方法及装置

Country Status (1)

Country Link
CN (1) CN112929516B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116320746B (zh) * 2023-05-16 2023-08-01 武汉昊一源科技有限公司 Tof对焦装置、对焦方法及拍摄设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4843565A (en) * 1987-07-30 1989-06-27 American Electronics, Inc. Range determination method and apparatus
KR20150018026A (ko) * 2013-08-08 2015-02-23 엘지전자 주식회사 3차원 카메라
CN106657969A (zh) * 2015-10-29 2017-05-10 三星电子株式会社 用于获得图像的装置和方法
CN109313267A (zh) * 2016-06-08 2019-02-05 松下知识产权经营株式会社 测距系统及测距方法
CN109673159A (zh) * 2017-08-13 2019-04-23 深圳市汇顶科技股份有限公司 基于多结构化照明的3d传感技术

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5073273B2 (ja) * 2006-11-21 2012-11-14 スタンレー電気株式会社 遠近判定方法およびその装置
KR101483462B1 (ko) * 2008-08-27 2015-01-16 삼성전자주식회사 깊이 영상 획득 장치 및 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4843565A (en) * 1987-07-30 1989-06-27 American Electronics, Inc. Range determination method and apparatus
KR20150018026A (ko) * 2013-08-08 2015-02-23 엘지전자 주식회사 3차원 카메라
CN106657969A (zh) * 2015-10-29 2017-05-10 三星电子株式会社 用于获得图像的装置和方法
CN109313267A (zh) * 2016-06-08 2019-02-05 松下知识产权经营株式会社 测距系统及测距方法
CN109673159A (zh) * 2017-08-13 2019-04-23 深圳市汇顶科技股份有限公司 基于多结构化照明的3d传感技术

Also Published As

Publication number Publication date
CN112929516A (zh) 2021-06-08

Similar Documents

Publication Publication Date Title
CN108509083B (zh) 显示面板和终端
CN111314597B (zh) 终端、对焦方法及装置
EP3855824A1 (en) Communication method and apparatus, terminal, base station, and storage medium
US20210410125A1 (en) Method and device for indicating transmission
CN108989494B (zh) 一种电子设备
CN107635074B (zh) 控制闹铃的方法、装置及计算机可读存储介质
CN108964800B (zh) 移动终端的天线性能检测方法及系统
CN111599273B (zh) 显示屏的控制方法、装置、终端设备及存储介质
CN110312300B (zh) 控制方法、装置及存储介质
US11156852B2 (en) Holographic projection device, method, apparatus, and computer readable storage medium
CN112929516B (zh) 图像采集模组、终端设备、图像处理方法及装置
CN106445122B (zh) 设备状态控制方法及装置
CN108886461B (zh) 数据传输方法及装置
CN111124175A (zh) 终端、显示处理方法、装置及存储介质
CN106919332B (zh) 信息传输方法及设备
CN112702514B (zh) 图像获取方法、装置、设备及存储介质
CN112954596B (zh) 数据共享方法、装置、设备及存储介质
CN111751786B (zh) 声波测量方法、装置、设备及存储介质
CN111246009B (zh) 滑盖式终端、距离检测方法、装置及存储介质
EP3813349A1 (en) Terminal device, lens adjustment method and readable storage medium
CN113727034A (zh) 补光控制方法、电子设备和存储介质
EP3648089A1 (en) Display screen and electronic device
CN107068031B (zh) 控制智能终端亮屏的方法及智能终端
EP3185115A1 (en) Touch button module, method and apparatus for displaying a button icon
CN210120604U (zh) 终端设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant