CN108694383A - 一种手势识别装置及其控制方法、显示装置 - Google Patents

一种手势识别装置及其控制方法、显示装置 Download PDF

Info

Publication number
CN108694383A
CN108694383A CN201810455725.8A CN201810455725A CN108694383A CN 108694383 A CN108694383 A CN 108694383A CN 201810455725 A CN201810455725 A CN 201810455725A CN 108694383 A CN108694383 A CN 108694383A
Authority
CN
China
Prior art keywords
signal
depth camera
light
controller
trigger
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810455725.8A
Other languages
English (en)
Other versions
CN108694383B (zh
Inventor
王鹏鹏
王海生
丁小梁
曹学友
张平
刘伟
邓立凯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BOE Technology Group Co Ltd
Original Assignee
BOE Technology Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BOE Technology Group Co Ltd filed Critical BOE Technology Group Co Ltd
Priority to CN201810455725.8A priority Critical patent/CN108694383B/zh
Priority to PCT/CN2018/102502 priority patent/WO2019218521A1/en
Priority to US16/346,943 priority patent/US11314334B2/en
Publication of CN108694383A publication Critical patent/CN108694383A/zh
Application granted granted Critical
Publication of CN108694383B publication Critical patent/CN108694383B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/28Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/147Details of sensors, e.g. sensor lenses
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Vascular Medicine (AREA)
  • General Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

本申请实施例提供的一种手势识别装置及其控制方法、显示装置,涉及显示技术领域,用于解决多个摄像头对手势进行采集的过程中,出现干扰的问题。该手势识别装置包括手势处理器以及与手势处理器相连接的多个深度摄像头。每个深度摄像头包括控制器、采集器。控制器用于根据触发信号生成采集信号,并控制采集信号发送的时间。采集器与控制器电连接,采集器用于接收采集信号,并执行图像采集操作。上述手势识别装置用于对用户的手势进行识别。

Description

一种手势识别装置及其控制方法、显示装置
技术领域
本发明涉及显示技术领域,尤其涉及一种手势识别装置及其控制方法、显示装置。
背景技术
目前,手势交互是利用计算机图形学等技术识别人的肢体语言,并将上述肢体语言转化为控制命令用于实现设备的操作。手势交互是继鼠标、键盘和触屏之后新的人机交互方式。
在手势交互的过程中,需要对用户的手势进行采集,根据采集到的手势调用与该手势相匹配的控制命令。在对手势采集的过程中,为了避免采集盲区,通常会设置多个摄像头对手势进行此采集。但是多个摄像头在采集的过程中,容易出现干扰,导致采集精度下降。
发明内容
本发明的实施例提供一种手势识别装置及其控制方法、显示装置,用于解决多个摄像头对手势进行采集的过程中,出现干扰的问题。
为达到上述目的,本发明的实施例采用如下技术方案:
本申请实施例的一方面,提供一种手势识别装置,包括手势处理器,所述手势识别装置还包括与所述手势处理器相连接的多个深度摄像头;每个所述深度摄像头包括控制器、采集器;控制器用于根据触发信号生成采集信号,并控制所述采集信号发送的时间;所述采集器与所述控制器电连接,所述采集器用于接收所述采集信号,并执行图像采集操作。
可选的,至少一个所述深度摄像头还包括光触发器;所述光触发器与所述控制器电连接,所述光触发器用于接收光信号,并根据所述光信号向所述控制器发送所述触发信号。
可选的,每个所述深度摄像头均包括所述光触发器;所述手势识别装置还包括触发光源,所述触发光源用于发出所述光信号。
可选的,所述光触发器包括光电转换器;具有所述光触发器的深度摄像头还包括电流电压转换器;所述电流电压转换器与所述光触发器和所述控制器电连接,所述电流电压转换器用于将所述光电转换器输出的电流信号转换成电压信号,并传输至所述控制器。
可选的,具有所述光触发器的深度摄像头还包括滤波整形器和相位补偿器;所述滤波整形器与所述电流电压转换器电连接,所述滤波整形器用于对所述电流电压转换器输出的电压信号进行滤波;所述相位补偿器与所述滤波整形器和所述控制器电连接,所述相位补偿器用于对所述滤波整形器输出的电压信号的相位进行补偿,并将补偿后的电压信号输出至所述控制器。
可选的,所述深度摄像头还包括发光元件;所述控制器包括光控元件;所述光控元件用于根据所述触发信号生成发光信号;所述发光元件与所述光控元件电连接,所述发光元件用于根据所述发光信号发出预设光信号。
可选的,所述采集器包括感光阵列以及读出元件;所述感光阵列与所述控制器电连接,所述感光阵列包括多个矩阵形式排列的感光像素;所述感光像素用于根据所述采集信号,接收所述预设光信号的反射光信号,并进行光电转换;所述读出元件与所述控制器和所述感光阵列电连接,所述读出元件用于根据所述采集信号,对所述预设光信号的反射光信号进行解调,并获取所述预设光信号与所述预设光信号的反射光信号的信号差异信息。
可选的,所述深度摄像头还包括运算器;所述运算器与所述读出元件电连接,所述运算器用于根据所述读出元件输出的所述信号差异信息,计算每个所述感光像素获得的图像深度信息。
可选的,所述控制器包括计数器和信号生成器;所述信号生成器用于生成所述采集信号;所述计数器与所述信号生成器电连接,所述计数器用于在接收到所述触发信号后,开始计数,且当计数数值达到预设阈值时,触发所述信号生成器发送所述采集信号。
可选的,在所述控制器包括光控元件的情况下,所述计数器还与所述光控元件电连接,所述计数器还用于在接收到所述触发信号后,开始计数,且当计数数值达到预设阈值时,触发所述光控元件发送所述发光信号。
可选的,在所述深度摄像头未包括所述光触发器,且所述采集器还包括感光阵列以及读出元件的情况下,所述计数器还与所述读出元件电连接;所述感光阵列中的至少一个感光像素还用于对入射光进行光电转换;所述读出元件用于根据所述感光像素输出的电信号,向所述计数器发出所述触发信号。
可选的,所述发光元件包括发光二极管,所述光控元件包括光调制器,所述预设光信号为光脉冲信号;或者,所述发光元件包括阵列排布的多个发光二极管,所述光控元件包括编码图案驱动元件,所述预设光信号为编码图案。
本申请实施例的另一方面,提供一种显示装置,包括如上所述的任意一种手势识别装置。
本申请实施例的另一方面,提供一种用于控制如上所述的手势识别装置的方法,包括:至少两个深度摄像头的控制器分时发送采集信号;所述深度摄像头中接收到所述采集信号的采集器,执行图像采集操作。
可选的,每个所述深度摄像头包括发光元件;多个深度摄像头包括主深度摄像头和从深度摄像头,且至少所述从深度摄像头包括光触发器;所述方法还包括:所述主深度摄像头的发光元件发出预设光信号;所述从深度摄像头的光触发器接收所述预设光信号作为光信号,并根据所述光信号向所述从深度摄像头的控制器发送触发信号;所述至少两个深度摄像头的控制器分时发送采集信号;所述深度摄像头中接收到所述采集信号的采集器,执行图像采集操作包括:所述主深度摄像头的控制器发送采集信号,且所述主深度摄像头的采集器执行图像采集操作;所述从深度摄像头中的控制器根据所述光触发器发送的触发信号生成采集信号,并在所述主深度摄像头的采集器完成图像采集操作后,发送所述采集信号;所述从深度摄像头的采集器接收所述从深度摄像头的控制器发送的采集信号,并执行图像采集操作。
可选的,每个深度摄像头包括控制器、采集器以及光触发器;所述手势识别装置还包括触发光源;所述至少两个深度摄像头的控制器分时发送采集信号之前,所述方法包括:所述触发光源向多个深度摄像头的光触发器发出光信号;所述光触发器接收光信号,并根据所述光信号向所述控制器发送所述触发信号;所述至少两个深度摄像头的控制器分时依次发送采集信号包括:每个所述深度摄像头的控制器根据所述光触发器发出的所述触发信号生成采集信号;所述多个深度摄像头的控制器依次向各自的采集器发送信号采集信号。
可选的,多个深度摄像头包括主深度摄像头和从深度摄像头;任意一个深度摄像头包括发光元件和采集器,所述采集器包括感光阵列以及读出元件;所述方法还包括:所述主深度摄像头的发光元件发出预设光信号;所述从深度摄像头的感光阵列中的至少一个感光像素对入射的预设光信号进行光电转换;所述从深度摄像头的读出元件根据所述感光像素输出的电信号,向所述从深度摄像头的控制器发出所述触发信号;所述至少两个深度摄像头的控制器分时发送采集信号;所述深度摄像头中接收到所述采集信号的采集器,执行图像采集操作包括:所述主深度摄像头的控制器发送采集信号,且所述主深度摄像头的采集器执行图像采集操作;所述从深度摄像头中的控制器根据所述读出元件发送的触发信号生成采集信号,并在所述主深度摄像头的采集器完成图像采集操作后,发送所述采集信号;所述从深度摄像头的采集器接收所述从深度摄像头的控制器发送的采集信号,并执行图像采集操作。
可选的,至少所述从深度摄像头的控制器包括计数器和信号生成器;所述从深度摄像头的读出元件向所述从深度摄像头的控制器发出所述触发信号包括:所述从深度摄像头的读出元件向所述从深度摄像头的计数器发出所述触发信号;所述从深度摄像头中的控制器在所述主深度摄像头的采集器完成图像采集操作后,发送所述采集信号包括:所述从深度摄像头的计数器在接收到所述读出元件发送的触发信号后,开始计数,在所述主深度摄像头的采集器完成图像采集操作后,所述从深度摄像头的计数器的计数数值达到预设阈值,所述计数器触发所述从深度摄像头的信号生成器发送所述采集信号。
由上述可知,本申请实施例提供的手势识别装置包括多个深度摄像头。该深度摄像头中的控制器能够根据触发信号生成用于控制采集器对图像进行采集的采集信号。此外,上述控制器还可以控制该采集信号发送的时间。这样一来,多个深度摄像头的控制器可以分时向各个深度摄像头的采集器发送采集信号,即不同的深度摄像头的控制器发送采集信号的时间不同。因此,其他深度摄像头发出的光线不会对一深度摄像头的采集器对图像进行采集时,造成干扰,从而能够提高手势的采集精度。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种手势识别装置的结构示意图;
图2为图1所示的手势识别装置中深度摄像头的一种结构示意图;
图3为图1中两个深度摄像头的采集范围示意图;
图4为图1所示的手势识别装置中深度摄像头的另一种结构示意图;
图5为图1所示的手势识别装置中深度摄像头的另一种结构示意图;
图6为图1所示的手势识别装置中深度摄像头的另一种结构示意图;
图7为图1所示的手势识别装置中深度摄像头的另一种结构示意图;
图8为图1所示的手势识别装置中深度摄像头的另一种结构示意图;
图9a为图1所示的手势识别装置中深度摄像头的另一种结构示意图;
图9b为图1所示的手势识别装置中深度摄像头的另一种结构示意图;
图10a为本申请实施例提供的一种显示装置的结构示意图;
图10b为本申请实施例提供的另一种显示装置的结构示意图;
图10c为本申请实施例提供的另一种显示装置的结构示意图;
图11为本申请实施例提供的一种手势识别装置的控制方法流程图;
图12为本申请实施例提供的另一种手势识别装置的控制方法流程图;
图13为本申请实施例提供的另一种手势识别装置的控制方法流程图;
图14为本申请实施例提供的另一种手势识别装置的控制方法流程图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
以下,在本申请实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
本申请实施例提供一种手势识别装置01,如图1所示,该手势识别装置01包括手势处理器100以及与该手势处理器100相连接的多个深度摄像头10。该深度摄像头10可以对用户的手势进行采集,并将采集信息传输至手势处理器100。该手势处理器100可以对深度摄像头10的采集信息进行处理,获得采集到的手势的特征信息,并于预先存储的预设手势进行比对,以达到识别手势的目的。
如图2所示,每个深度摄像头10包括控制器11、采集器12。
基于此,控制器11用于根据触发信号生成采集信号,并控制该采集信号发送的时间。
采集器12与控制器11电连接,该采集器12用于接收上述采集信号,并执行图像采集操作。
综上所述,一方面,本申请提供的手势识别装置01包括多个深度摄像头10。该深度摄像头10中的控制器11能够根据触发信号生成用于控制采集器12对图像进行采集的采集信号。此外,上述控制器11还可以控制该采集信号发送的时间。这样一来,多个深度摄像头10的控制器11可以分时向各个深度摄像头10的采集器12发送采集信号,即不同的深度摄像头10的控制器11发送采集信号的时间不同。
示例的,如图2所示,以上述手势识别装置包括两个深度摄像头,深度摄像头10_a和深度摄像头10_b为例,当深度摄像头10_a中的控制器11向该深度摄像头10_a中的采集器12发送采集信号,且该采集器12完成图像采集操作后,深度摄像头10_b中的控制器11向该深度摄像头10_b中的采集器12再发送采集信号。此时,深度摄像头10_a已经完成发光和图像采集操作,因此深度摄像头10_a发出的光线不会在深度摄像头10_b的采集器12对图像进行采集时,造成干扰,从而能够提高手势的采集精度。另一方面,由于本申请的手势识别装置01具有多个深度摄像头10,如图3所示,相对于设置一个摄像头(图3中虚线框所示)的采集范围②而言,多个深度摄像头10(以两个为例)合并得到的采集范围①相对于采集范围②而言,明显增大,从而可以扩大用户的手势活动范围,减小了采集盲区存在的几率。基于此,多个深度摄像头10的采集范围具有重叠部分③。在此情况下,当用户的至少一部分手势位于上述重叠部分③时,根据上述多个深度摄像头10各自相对的位置关系,可以将两个深度摄像头10分别在重叠部③分采集到的图像进行拼接,以确保手势采集的正确性。
由上述可知,控制器11只有在接收到触发信号后,才会生成和发送上述采集信号。其中,上述触发信号可以由用户输入,或者还可以由用户通过控制一触发源,发出上述触发信号。以下针对具有能够发送上述触发信号的触发源的深度摄像头10的结构进行举例说明。
示例性的,上述手势识别装置01中的至少一个深度摄像头10,如图4所示,包括光触发器13。其中,该光触发器13可以包括光电转换器,例如光电二极管。在此情况下,该光触发器13在接收到光信号后,可以经过光电转换将上述光信号转换为电流信号。
基于此,上述光触发器13与控制器11电连接,该光触发器13用于接收光信号,并根据该光信号向控制器11发送上述触发信号。由此可知,该光触发器13为上述用于发出触发信号的触发源。用户可以控制上述光信号的发送时间,以达到控制光触发器13发送触发信号的时间的目的。
此外,如图4所示,具有上述光触发器13的深度摄像头10还包括电流电压转换器14,上述电流电压转换器14与光触发器13和控制器11电连接。当光触发器13中的光电转换器将接收到的光信号转换为电流信号后,该电流电压转换器14可以将上述电流信号转换成电压信号,并传输至控制器11。
在上述电流电压转换器14执行电流电压转换操作后,为了减小转换后的电压信号的波形出现畸变的几率,可选的,如图4所示,上述具有光触发器13的深度摄像头10还包括滤波整形器15和相位补偿器16。
其中,滤波整形器15与电流电压转换器14电连接,该滤波整形器15用于对电流电压转换器14输出的电压信号进行滤波,降低电流电压转换器14输出的电压信号的噪声。
此外,上述相位补偿器16与滤波整形器15和控制器11电连接,该相位补偿器16用于对滤波整形器15输出的电压信号的相位进行补偿,并将补偿后的电压信号输出至控制器11,这样一来,当电流电压转换器14转换后的电压信号的波形中受到转换精度的影响,导致部分波形的相位发生变化时,上述相位补偿器16能够对发生变化的相位进行补偿,以确保转换后电压信号的完整和正确性。
在此基础上,如图4或图5所示,上述深度摄像头10还包括发光元件17。
基于此,该控制器11包括光控元件110。该光控元件110用于根据上述触发信号生成发光信号。
在此情况下,上述发光元件17与光控元件110电连接,该发光元件17用于根据发光信号发出预设光信号。该预设光信号用于入射至被拍摄的物体上。
以下对上述发光元件17以及光控元件110的结构进行举例说明。
示例性的,如图4所示,上述发光元件17包括发光二极管。此时,该光控元件110包括光调制器。在光调制器的光调制作用下,可以控制发光二极管发出具有一定周期的光脉冲(例如正弦)信号,在此情况下,上述预设光信号为该光脉冲信号。在此情况下,具有该发光元件17和光控元件110的深度摄像头10为飞行时间深度(Time of Flight,TOF)摄像头。
或者,示例性的,如图5所示,上述发光元件17包括阵列排布的多个发光二极管。此时,该光控元件110包括编码图案驱动元件。该编码图案驱动元件中可以根据用户需要存储不同的编码图案,当发光元件17接收的上述编码图案后,能够控制阵列排布的多个发光二极管中的部分发光二极管发光,而部分发光二极管处于关闭状态,从而能够使得上述阵列排布的多个发光二极管显示出接收到的上述编码图案。在此情况下,上述预设光信号为编码图案。在此情况下,具有该发光元件17和光控元件110的深度摄像头10为结构光摄像头。
此外,上述采集器12,如图4或图5所示,包括感光阵列120以及读出元件121。
其中,感光阵列120与控制器11电连接,感光阵列120包括多个矩阵形式排列的感光像素1201。每个感光像素1201中可以设置有一个光电二极管。上述感光像素1201用于根据控制器11发出的采集信号,接收上述发光元件17发送的预设光信号入射至待拍摄物体上后,被该待拍摄物体反射后的反射光信号(以下简称预设光信号的反射光信号),并进行光电转换。在此情况下,当感光阵列120中的各个感光像素1201接收到上述反射光信号后,可以对待拍摄物体进行曝光。
此外,读出元件121与控制器11和感光阵列120电连接。该读出元件121用于根据控制器11发出的采集信号,对预设光信号的反射光信号进行解调,并获取预设光信号与预设光信号的反射光信号的信号差异信息。
示例性的,当上述预设光信号为光脉冲信号时,即上述深度摄像头10为TOF摄像头时,上述读出元件121在接收到控制器11发出的采集信号后,可以对上述发光元件17发出的光脉冲信号入射至待拍摄物体,然后被该待拍摄物体反射的反射光脉冲信号进行解调,获取发光元件17发出的光脉冲信号与待拍摄物体反射的反射光脉冲信号之间的相位差。在此情况下,上述信号差异信息为光脉冲信号与反射光脉冲信号之间的相位差。
或者,示例性的,当上述预设光信号为编码图案时,即上述深度摄像头10为结构光摄像头时,上述读出元件121在接收到控制器11发出的采集信号后,可以对上述发光元件17显示的编码图案入射至待拍摄物体,然后被该待拍摄物体反射的反射编码图案进行解调,根据发光元件17发出的编码图案,获取与待拍摄物体反射的反射编码图案中每个像素点的畸变量。在此情况下,上述信号差异信息为反射编码图案的畸变量。
在此基础上,如图4或图5所示,上述深度摄像头10还包括运算器18。该运算器18与读出元件121电连接,该运算器18用于根据读出元件121输出的上述信号差异信息,计算每个感光像素1201获得的图像深度信息,从而根据该图像深度信息生成深度图像。
需要说明的是,本申请对深度摄像头10的类型不做限定,例如可以为上述TOF摄像头,或者还可以为上述结构光摄像头,为了方便说明。以下均是以TOF摄像头为例进行的说明。
基于上述深度摄像头10的结构,以上述手势识别装置01中具有两个深度摄像头10(深度摄像头10_a和深度摄像头10_b)为例,对该手势识别装置01的具体结构进行详细的说明。
示例一,如图6所示,该手势识别装置01中每个深度摄像头都具有上述光触发器13。
在此情况下,上述手势识别装置01还包括触发光源20,该触发光源20用于向各个深度摄像头中的光触发器13发出光信号。其中,上述光信号可以为红外光。上述触发光源20可以与一激励源相连接,并在该激励源的激励下发出上述红外光。
在此情况下,上述深度摄像头10_a和深度摄像头10_b的光触发器13可以均接收到触发光源20发出的光信号,并均向各自所连接的控制器11发送触发信号。
在此情况下,为了避免深度摄像头10_a和深度摄像头10_b在拍摄过程中出现干扰,不同的深度摄像头的控制器11需要分时发出发光信号和采集信号。
基于此,为了实现上述目的,如图6所示,上述控制器11还包括信号生成器111和计数器112。
其中,信号生成器111用于生成上述采集信号。在此情况下,采集器12中的感光阵列120以及读出元件121可以均与上述信号生成器111电连接,以接收该信号生成器111输出的采集信号。
计数器112与信号生成器111电连接,该计数器112用于在接收到上述触发信号后,开始计数,且当计数数值达到预设阈值时,触发信号生成器111发送上述采集信号。
需要说明的是,由上述可知,提供至计数器112的触发信号可以是用户直接输入的。或者,如上所述在深度摄像头10还包括光触发器13的情况下,该计数器112还与光触发器13电连接。在此情况下,上述光触发器13可以向该计数器112输出上述触发信号,而该计数器112用于接收该光触发器13发送的触发信号。其中,同上所述,光触发器13与控制器11之间设置有上述电流电压转换器14、滤波整形器15以及相位补偿器16时,该相位补偿器16与计数器112相连接。
此外,在上述控制器11包括光控元件110的情况下,该计数器112还可以与光控元件110电连接。在此情况下,上述计数器112还用于在接收到触发信号后,开始计数,且当计数数值达到预设阈值时,触发光控元件110发送发光信号,从而实现光控元件110根据触发信号生成发光信号的目的。
其中,不同的深度摄像头中的上述计数器112的预设阈值的大小不同,从而可以实现分时拍摄。
示例性的,深度摄像头10_a中计数器112的预设阈值可以小于深度摄像头10_b中计数器112的预设阈值。在此情况下,深度摄像头10_a和深度摄像头10_b的分时拍摄过程如下:
首先,对于深度摄像头10_a而言,当该深度摄像头10_a中的计数器112接收到光触发器13发出的触发信号后,计数器112开始计时,例如,当该深度摄像头10_a中计数器112的预设阈值为零时,该计数器112在接收到上述触发信号后,会立刻触发光控元件110向发光元件17发送发光信号,并触发信号生成器111向采集器12发送采集信号。
此时,深度摄像头10_a中的发光元件17发出的光脉冲信号照射至待拍摄物体,该待拍摄物体对上述光脉冲信号进行发射,反射光脉冲信号入射至深度摄像头10_a中的感光阵列120,通过感光阵列120对待拍摄物体进行成像,然后通过读出元件121对反射光脉冲信号进行解调,获取发光元件17发出的光脉冲信号与待拍摄物体反射的反射光脉冲信号之间的相位差。该深度摄像头10_a中的运算器18根据上述相位差,计算每个感光像素1201获得的图像深度信息,从而根据该图像深度信息生成深度图像。
基于此,上述深度摄像头10_a完成了整个拍摄过程。
接下来,深度摄像头10_b执行拍摄过程,由于深度摄像头10_b中计数器112的预设阈值较大,该深度摄像头10_b中的计数器112在接收到触发信号后,开始计时。可以设置当深度摄像头10_a完成上述拍摄过程后,深度摄像头10_b中的计数器112的计数数值达到其预设阈值。这样一来,当深度摄像头10_b的计数器112控制该深度摄像头10_b的光控元件110发送发光信号,并控制信号生成器111发送采集信号时,上述深度摄像头10_a已经完成了拍摄,这时待拍摄物体反射的反射光脉冲信号均是来自于深度摄像头10_b中的发光元件17发出的光脉冲信号,从而可以避免两个深度摄像头之间产生串扰。
其中,深度摄像头10_b的拍摄过程同上所述,此处不再赘述。
或者,示例二,手势识别装置01的具体结构,如图7所示,此时,该手势识别装置01中未设置上述触发光源20。
在此情况下,深度摄像头10_a和深度摄像头10_b中深度摄像头10_a为主深度摄像头,而深度摄像头10_b为从深度摄像头。基于此,深度摄像头10_a先进行拍摄,在拍摄过程中,可以采用一发光源仅为深度摄像头10_a中的光触发器13提供光信号,使得该光触发器13向控制器11输出触发信号,或者用户直接向该深度摄像头10_a中的控制器11提供触发信号。
基于此,深度摄像头10_a中的控制器11接收到上述触发信号后,通过光控元件110向发光元件17发送发光信号,并通过计数器112触发信号生成器111向采集器12发送采集信号。该深度摄像头10_a中的发光元件17接收到上述发光信号后,发出的光脉冲信号照射至待拍摄物体02。
此时,该待拍摄物体02反射的反射光脉冲信号不仅可以被深度摄像头10_a中的感光阵列120接收,还可以作为光信号被深度摄像头10_b中的光触发器13。在此情况下,深度摄像头10_b的光触发器13向深度摄像头10_b的控制器11中的计数器112发送触发信号。
同上所述,该深度摄像头10_b中的计数器112在接收到触发信号后,开始计时。可以设置当深度摄像头10_a完成上述拍摄过程后,深度摄像头10_b中的计数器112的计数数值达到其预设阈值,从而使得深度摄像头10_a和深度摄像头10_b能够分时拍摄。
其中,上述深度摄像头10_a和深度摄像头10_b的拍摄过程同上所述,此处不再赘述。
由上述可知,作为主深度摄像头的深度摄像头10_a中的控制器11接收到的触发信号可以通过用户直接输入,在此情况下,示例三,手势识别装置01的具体结构,如图8所示,该手势识别装置01中同样未设置上述触发光源20。此外,作为第一个主深度摄像头的深度摄像头10_a中可以无需设置光触发器13,以及用于对该光触发器13输出的信号进行处理的电流电压转换器14、滤波整形器15以及相位补偿器16。
或者,示例四,手势识别装置01的具体结构,如图9a所示,该手势识别装置01中同样未设置上述触发光源20,且任意一个深度摄像头10中均为设置上述光触发器13。
在此情况下,深度摄像头10_a仍然可以为主深度摄像头,而深度摄像头10_b仍然可以为从深度摄像头。此时,至少作为从深度摄像头的深度摄像头10_b中的计数器112还与该深度摄像头10_b中的读出元件121电连接。
在此情况下,该深度摄像头10_b中的感光阵列120中的至少一个感光像素1201还用于对入射光进行光电转换。
该深度摄像头10_b中的读出元件121还用于根据感光像素1201输出的电信号,向计数器112发出触发信号。
基于此,上述深度摄像头10_a和深度摄像头10_b的拍摄过称为:首先,深度摄像头10_a仍然先进行拍摄,且用户向该深度摄像头10_a中的控制器11输入触发信号,以使得该控制器11能够控制光控元件110向发光元件17发送发光信号,并控制计数器112触发信号生成器111向采集器12发送采集信号。
在此情况下,深度摄像头10_b中的感光阵列120处于常开的状态,此时,当深度摄像头10_a中的发光元件17发出光脉冲信号时,该光脉冲信号照射至待拍摄物体02后,该待拍摄物体02反射的反射光脉冲信号不仅可以被深度摄像头10_a中的感光阵列120接收,还可以作为光信号被深度摄像头10_b中的感光阵列120中的至少一个感光像素1201接收。
在此情况下,深度摄像头10_b的感光像素1201对接收到的光信号进行光电转换,该深度摄像头10_b中的读出元件121接收到上述感光像素1201输出的电信号后,向深度摄像头10_b的计数器112发出触发信号。
同上所述,该深度摄像头10_b中的计数器112在接收到触发信号后,开始计时。可以设置当深度摄像头10_a完成上述拍摄过程后,深度摄像头10_b中的计数器112的计数数值达到其预设阈值,从而使得深度摄像头10_a和深度摄像头10_b能够分时拍摄。
需要说明的是,上述仅仅是以手势识别装置01包括两个深度摄像头为例进行的说明。当该手势识别装置包括多个摄像头时,拍摄过程同上所述。此外,当多个,例如至少三个深度摄像头分为主深度摄像头和从深度摄像头时,一从深度摄像头可以是前一个深度摄像头的从深度摄像头,还可以是后一个深度摄像头的主深度摄像头。
此外,在手势识别装置01包括至少三个深度摄像头10的情况下,手势识别装置01还可以为上述图6、图7、图8以及图9a所示的各个方案的任意组合,例如,示例五,手势识别装置01的具体结构,如图9b所示,该手势识别装置01具有光触发器13的至少一个深度摄像头为作为主深度摄像头的深度摄像头10_a,而作为从深度摄像头的的深度摄像头10_b中未设置上述光触发器13。
在此情况下,在拍摄过程中,可以采用一发光源为深度摄像头10_a中的光触发器13提供光信号,使得该光触发器13向深度摄像头10_a中的控制器11输出触发信号。此时,同上所述,深度摄像头10_a中的发光元件17发出的光脉冲信号照射至待拍摄物体02。
此时,该待拍摄物体02反射的反射光脉冲信号不仅可以被深度摄像头10_a中的感光阵列120接收,还可以作为光信号被深度摄像头10_b中的感光阵列120中的至少一个感光像素1201接收。在此情况下,深度摄像头10_b中的读出元件121接收到上述感光像素1201输出的电信号后,向深度摄像头10_b的计数器112发出触发信号。
深度摄像头10_a和深度摄像头10_b的拍摄过程同上所述,此处不再赘述。
此外,手势识别装置01由上述图6、图7、图8以及图9a所示的各个方案构成的其他组合方案在此不再一一赘述。
由上述可知,该手势识别装置01中的多个深度摄像头10通过光信号控制其各自分时进行手势的采集,且各个深度摄像头10的电路结构分离设置,之间无需通过物理电路电连接,从而避免了物理电路对多个深度摄像头10的制约。因此,多个深度摄像头10具有很强的独立性,能够减小相互的耦合作用,从而有利于降低信号噪声。
本申请实施例提供一种显示装置,包括如上所述的任意一种手势识别装置01。该显示装置可以为显示器、电视、数码相框、手机或平板电脑等任何具有显示功能的产品或者部件。该显示装置具有与前述实施例提供额手势识别装置01相同的技术效果,此处不再赘述。
此外,上述显示装置可以为液晶显示器(Liquid Crystal Display,LCD)或者有机发光二极管(Organic Light Emitting Diode,OLED)显示装置。当该显示装置为OLED显示装置时,可以如图10a所示,将上述手势识别装置01中深度摄像头10中的部分结构,例如感光阵列120以及棱镜19集成于该OLED显示装置内部。
具体的,可以在OLED显示装置中像素定义层(Pixel Define Layer,PDL)中制作用于容纳OLED器件的凹槽的同时,在该OLED显示装置的非显示区域,即用于集成上述深度摄像头10的位置,形成用于容纳感光阵列120的感光像素1201中的光电二极管的凹槽。然后,将棱镜19设置于感光像素1201的发光侧。
此外,上述手势识别装置01中的多个深度摄像头10,如图10b所示,可以设置于显示装置中显示面板的前框上。
此外,如图10c所示,在手势识别装置01的深度摄像头10具有上述光触发器13,且手势识别装置01具有上述触发光源20时。上述触发光源20以及光触发器13均可以设置于显示装置中显示面板的前框上,并且在一些实施例中,上述触发光源20可以位于两个深度摄像头10之间。
上述触发光源20发出的光线照射至物体(包括待拍摄物体)后,会发生漫反射,使得光触发器13接收到上述漫反射光线,作为光信号,以向该光触发器13各自所连接的控制器11发送触发信号。
或者,当显示装置中显示面板的非显示区的面积较小时,该触发光源20还可以独立于显示面板设置。此时,可以通过固定装置,例如夹具将上述触发光源20固定于显示面板的前框上。
本申请实施例提供一种用于控制如上所述的任意一种手势识别装置01的方法,如图11所示,上述方法包括:
S101、至少两个深度摄像头10的控制器11分时发送采集信号。
S102、该深度摄像头10中接收到采集信号的采集器12,执行图像采集操作。
上述手势识别装置01的控制方法具有与前述实施例提供的手势识别装置具有相同的技术效果,此处不再赘述。
以下,以手势识别装置01包括两个深度摄像头10(深度摄像头10_a和深度摄像头10_b)为例,对具有不同结构的手势识别装置01的控制方法分别进行举例说明。
示例一,在上述手势识别装置01的结构如图7或图8所示,即深度摄像头10_a和深度摄像头10_b中,深度摄像头10_a为主深度摄像头,深度摄像头10_b为从深度摄像头,且每个深度摄像头均包括发光元件17,至少从深度摄像头10_b包括光触发器13的情况下,上述方法,如图12所示,还包括:
S201,主深度摄像头10_a的发光元件17发出预设光信号,例如光脉冲信号。
示例性的,当主深度摄像头10_a包括上述光触发器13时,可以采用一发光源仅深度摄像头10_a中的光触发器13提供光信号,使得该光触发器13向控制器11输出触发信号。或者,当主深度摄像头10_a未包括上述光触发器13时,用户直接向该主深度摄像头10_a中的控制器11提供触发信号。
基于此,主深度摄像头10_a中的控制器11接收到上述触发信号后,通过光控元件110向发光元件17发送发光信号,该发光元件17根据该发光信号发出预设光信号,例如光脉冲信号。
需要说明的是,上述步骤S201可以在主深度摄像头10_a发送采集信号的步骤之前,也可以在主深度摄像头10_a发送采集信号的步骤之后,还可以与主深度摄像头10_a发送采集信号的步骤同时进行。
S202、从深度摄像头10_b的光触发器13接收上述预设光信号,作为光信号,并根据该光信号向从深度摄像头10_b的控制器11发送触发信号。
基于此,上述步骤S101和步骤S102包括:
首先,主深度摄像头10_a的控制器11发送采集信号,且主深度摄像头10_a的采集器12执行图像采集操作。
接下来,从深度摄像头10_b中的控制器11根据光触发器13发送的触发信号生成采集信号,并在主深度摄像头10_a的采集器12完成图像采集操作后,从深度摄像头10_b中的控制器11再发送上述采集信号。
然后,从深度摄像头10_b的采集器12接收从深度摄像头10_b的控制器11发送的采集信号,并执行图像采集操作。
其中,当任意一个深度摄像头的控制器11包括光控元件110、计数器112和信号生成器111,且采集器12包括感光阵列120和读出元件121的情况下,上述深度摄像头发送发光信号、采集信号;以及发光信号发光,根据采集信号对图像进行采集的操作同上所述,此处不再赘述。
由上述可知,从深度摄像头10_b在对图像进行采集时,主深度摄像头10_a已经完成了图像的采集,因此两个深度摄像头的拍摄过程不会受到干扰。
示例二,在上述手势识别装置01的结构如图6所示,每个深度摄像头(深度摄像头10_a和深度摄像头10_b)包括控制器11、采集器12以及光触发器13。且手势识别装置01还包括触发光源20的情况下,上述步骤S101之前,该方法如图13所示,还包括:
S301、触发光源20向多个深度摄像头,即深度摄像头10_a和深度摄像头10_b的光触发器13发出光信号。
S302、光触发器13接收光信号,并根据该光信号向控制器11发送触发信号。
基于此,上述S101包括:
首先,每个深度摄像头10的控制器11根据光触发器13发出的触发信号生成采集信号;
然后,多个深度摄像头10的控制器11依次向各自的采集器12发送信号采集信号。
示例性的,当任意一个深度摄像头10的控制器包括光控元件110、计数器112和信号生成器111的情况下,该深度摄像头10_a中的计数器112接收到光触发器13发出的触发信号后,如果该深度摄像头10_a中计数器112的预设阈值为零,该计数器112在接收到上述触发信号后,会立刻触发光控元件110向发光元件17发送发光信号,并触发信号生成器111向采集器12发送采集信号。然后,深度摄像头10_a中的采集器12执行图像采集操作。
接下来,深度摄像头10_b中的计数器112在接收到触发信号后,开始计时。可以设置当深度摄像头10_a完成上述拍摄过程后,深度摄像头10_b中的计数器112的计数数值达到其预设阈值。这样一来,当计数器112控制该深度摄像头10_b的光控元件110发送发光信号,并控制信号生成器111发送采集信号时,上述深度摄像头10_a已经完成了拍摄,这时待拍摄物体反射的反射光脉冲信号均是来自于深度摄像头10_b中的发光元件17发出的光脉冲信号,从而可以避免两个深度摄像头之间产生串扰。
示例三,在上述手势识别装置01的结构如图9a所示,即深度摄像头10_a和深度摄像头10_b中,深度摄像头10_a为主深度摄像头,深度摄像头10_b为从深度摄像头,且每个深度摄像头均包括发光元件17和采集器12,该采集器12包括感光阵列120以及读出元件121的情况下,上述方法,如图14所示,还包括:
S401、主深度摄像头10_a的发光元件17发出预设光信号,例如光脉冲信号。
需要说明的是,上述步骤S401可以在主深度摄像头10_a发送采集信号的步骤之前,也可以在主深度摄像头10_a发送采集信号的步骤之后,还可以与主深度摄像头10_a发送采集信号的步骤同时进行。
S402、从深度摄像头10_b的感光阵列120中的至少一个感光像素1201对入射的预设光信号进行光电转换。
S403、从深度摄像头10_b的读出元件121根据感光像素1201输出的电信号,向从深度摄像头10_b的控制器11发出触发信号。
基于此,上述步骤S101和步骤S102包括:
首先,主深度摄像头10_a的控制器11发送采集信号,且主深度摄像头10_a的采集器12执行图像采集操作。
接下来,从深度摄像头10_b中的采集器12根据其读出元件121发送的触发信号生成采集信号,并在主深度摄像头10_a的采集器12完成图像采集操作后,从深度摄像头10_b中的控制器11再发送上述采集信号。
示例性的,在至少从深度摄像头10_b的控制器11包括计数器112和信号生成器111的情况下,上述从深度摄像头10_b的读出元件121向从深度摄像头10_b的控制器11发出触发信号包括:
从深度摄像头10_b中的感光阵列120处于常开的状态,此时,当主深度摄像头10_a中的发光元件17发出光脉冲信号时,该光脉冲信号照射至待拍摄物体02后,该待拍摄物体02反射的反射光脉冲信号作为光信号被从深度摄像头10_b中的感光阵列120中的至少一个感光像素1201接收。在此情况下,从深度摄像头10_b的感光像素1201对接收到的光信号进行光电转换,该从深度摄像头10_b中的读出元件121接收到上述感光像素1201输出的电信号后,从深度摄像头10_b的读出元件121向从深度摄像头10_b的计数器112发出触发信号。
接下来,从深度摄像头10_b的采集器12接收从深度摄像头10_b的控制器11发送的采集信号,并执行图像采集操作。
其中,从深度摄像头中10_b的控制器11在主深度摄像头10_a的采集器12完成图像采集操作后,发送采集信号包括:
从深度摄像头10_b的计数器在接收到读出元件121发送的触发信号后,开始计数,在主深度摄像头10_a的采集器12完成图像采集操作后,从深度摄像头10_b的计数器121的计数数值达到预设阈值,该计数器112触发从深度摄像头10_b的信号生成器111向从深度摄像头10_b的采集器12发送上述采集信号。
上述主深度摄像头10_a和从深度摄像头10_b发送发光信号、采集信号;以及发光信号发光,根据采集信号对图像进行采集的操作同上所述,此处不再赘述。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序信号相关的硬件来完成,前述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。

Claims (19)

1.一种手势识别装置,包括手势处理器,其特征在于,所述手势识别装置还包括与所述手势处理器相连接的多个深度摄像头;每个所述深度摄像头包括控制器、采集器;
所述控制器用于根据触发信号生成采集信号,并控制所述采集信号发送的时间;
所述采集器与所述控制器电连接,所述采集器用于接收所述采集信号,并执行图像采集操作。
2.根据权利要求1所述的手势识别装置,其特征在于,至少一个所述深度摄像头还包括光触发器;
所述光触发器与所述控制器电连接,所述光触发器用于接收光信号,并根据所述光信号向所述控制器发送所述触发信号。
3.根据权利要求2所述的手势识别装置,其特征在于,每个所述深度摄像头均包括所述光触发器;
所述手势识别装置还包括触发光源,所述触发光源用于发出所述光信号。
4.根据权利要求1所述的手势识别装置,其特征在于,所述光触发器包括光电转换器;具有所述光触发器的深度摄像头还包括电流电压转换器;
所述电流电压转换器与所述光触发器和所述控制器电连接,所述电流电压转换器用于将所述光电转换器输出的电流信号转换成电压信号,并传输至所述控制器。
5.根据权利要求4所述的手势识别装置,其特征在于,具有所述光触发器的深度摄像头还包括滤波整形器和相位补偿器;
所述滤波整形器与所述电流电压转换器电连接,所述滤波整形器用于对所述电流电压转换器输出的电压信号进行滤波;
所述相位补偿器与所述滤波整形器和所述控制器电连接,所述相位补偿器用于对所述滤波整形器输出的电压信号的相位进行补偿,并将补偿后的电压信号输出至所述控制器。
6.根据权利要求1所述的手势识别装置,其特征在于,所述深度摄像头还包括发光元件;所述控制器包括光控元件;
所述光控元件用于根据所述触发信号生成发光信号;
所述发光元件与所述光控元件电连接,所述发光元件用于根据所述发光信号发出预设光信号。
7.根据权利要求6所述的手势识别装置,其特征在于,所述采集器包括感光阵列以及读出元件;
所述感光阵列与所述控制器电连接,所述感光阵列包括多个矩阵形式排列的感光像素;所述感光像素用于根据所述采集信号,接收所述预设光信号的反射光信号,并进行光电转换;
所述读出元件与所述控制器和所述感光阵列电连接,所述读出元件用于根据所述采集信号,对所述预设光信号的反射光信号进行解调,并获取所述预设光信号与所述预设光信号的反射光信号的信号差异信息。
8.根据权利要求7所述的手势识别装置,其特征在于,所述深度摄像头还包括运算器;所述运算器与所述读出元件电连接,所述运算器用于根据所述读出元件输出的所述信号差异信息,计算每个所述感光像素获得的图像深度信息。
9.根据权利要求1-8任一项所述的手势识别装置,其特征在于,所述控制器包括计数器和信号生成器;
所述信号生成器用于生成所述采集信号;
所述计数器与所述信号生成器电连接,所述计数器用于在接收到所述触发信号后,开始计数,且当计数数值达到预设阈值时,触发所述信号生成器发送所述采集信号。
10.根据权利要求9所述的手势识别装置,其特征在于,在所述控制器包括光控元件的情况下,所述计数器还与所述光控元件电连接,所述计数器还用于在接收到所述触发信号后,开始计数,且当计数数值达到预设阈值时,触发所述光控元件发送所述发光信号。
11.根据权利要求9所述的手势识别装置,其特征在于,在至少一个所述深度摄像头还包括光触发器的情况下,所述计数器还与所述光触发器电连接,所述计数器用于接收所述光触发器发送的所述触发信号。
12.根据权利要求9所述的手势识别装置,其特征在于,在所述深度摄像头未包括所述光触发器,且所述采集器还包括感光阵列以及读出元件的情况下,所述计数器还与所述读出元件电连接;
所述感光阵列中的至少一个感光像素还用于对入射光进行光电转换;
所述读出元件用于根据所述感光像素输出的电信号,向所述计数器发出所述触发信号。
13.根据权利要求6所述的手势识别装置,其特征在于,所述发光元件包括发光二极管,所述光控元件包括光调制器,所述预设光信号为光脉冲信号;
或者,所述发光元件包括阵列排布的多个发光二极管,所述光控元件包括编码图案驱动元件,所述预设光信号为编码图案。
14.一种显示装置,其特征在于,包括如权利要求1-13任一项所述的手势识别装置。
15.一种用于控制如权利要求1-13任一项所述的手势识别装置的方法,其特征在于,所述方法包括:
至少两个深度摄像头的控制器分时发送采集信号;
所述深度摄像头中接收到所述采集信号的采集器,执行图像采集操作。
16.根据权利要求15所述的方法,其特征在于,每个所述深度摄像头包括发光元件;多个深度摄像头包括主深度摄像头和从深度摄像头,且至少所述从深度摄像头包括光触发器;所述方法还包括:
所述主深度摄像头的发光元件发出预设光信号;
所述从深度摄像头的光触发器接收所述预设光信号作为光信号,并根据所述光信号向所述从深度摄像头的控制器发送触发信号;
所述至少两个深度摄像头的控制器分时发送采集信号;所述深度摄像头中接收到所述采集信号的采集器,执行图像采集操作包括:
所述主深度摄像头的控制器发送采集信号,且所述主深度摄像头的采集器执行图像采集操作;
所述从深度摄像头中的控制器根据所述光触发器发送的触发信号生成采集信号,并在所述主深度摄像头的采集器完成图像采集操作后,发送所述采集信号;
所述从深度摄像头的采集器接收所述从深度摄像头的控制器发送的采集信号,并执行图像采集操作。
17.根据权利要求15所述的方法,其特征在于,每个深度摄像头包括控制器、采集器以及光触发器;所述手势识别装置还包括触发光源;所述至少两个深度摄像头的控制器分时发送采集信号之前,所述方法包括:
所述触发光源向多个深度摄像头的光触发器发出光信号;
所述光触发器接收光信号,并根据所述光信号向所述控制器发送所述触发信号;
所述至少两个深度摄像头的控制器分时依次发送采集信号包括:
每个所述深度摄像头的控制器根据所述光触发器发出的所述触发信号生成采集信号;
所述多个深度摄像头的控制器依次向各自的采集器发送信号采集信号。
18.根据权利要求15所述的方法,其特征在于,多个深度摄像头包括主深度摄像头和从深度摄像头;任意一个深度摄像头包括发光元件和采集器,所述采集器包括感光阵列以及读出元件;所述方法还包括:
所述主深度摄像头的发光元件发出预设光信号;
所述从深度摄像头的感光阵列中的至少一个感光像素对入射的预设光信号进行光电转换;
所述从深度摄像头的读出元件根据所述感光像素输出的电信号,向所述从深度摄像头的控制器发出所述触发信号;
所述至少两个深度摄像头的控制器分时发送采集信号;所述深度摄像头中接收到所述采集信号的采集器,执行图像采集操作包括:
所述主深度摄像头的控制器发送采集信号,且所述主深度摄像头的采集器执行图像采集操作;
所述从深度摄像头中的控制器根据所述读出元件发送的触发信号生成采集信号,并在所述主深度摄像头的采集器完成图像采集操作后,发送所述采集信号;
所述从深度摄像头的采集器接收所述从深度摄像头的控制器发送的采集信号,并执行图像采集操作。
19.根据权利要求18所述的方法,其特征在于,至少所述从深度摄像头的控制器包括计数器和信号生成器;所述从深度摄像头的读出元件向所述从深度摄像头的控制器发出所述触发信号包括:
所述从深度摄像头的读出元件向所述从深度摄像头的计数器发出所述触发信号;
所述从深度摄像头中的控制器在所述主深度摄像头的采集器完成图像采集操作后,发送所述采集信号包括:
所述从深度摄像头的计数器在接收到所述读出元件发送的触发信号后,开始计数,在所述主深度摄像头的采集器完成图像采集操作后,所述从深度摄像头的计数器的计数数值达到预设阈值,所述计数器触发所述从深度摄像头的信号生成器发送所述采集信号。
CN201810455725.8A 2018-05-14 2018-05-14 一种手势识别装置及其控制方法、显示装置 Active CN108694383B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201810455725.8A CN108694383B (zh) 2018-05-14 2018-05-14 一种手势识别装置及其控制方法、显示装置
PCT/CN2018/102502 WO2019218521A1 (en) 2018-05-14 2018-08-27 Gesture recognition apparatus, control method thereof, and display apparatus
US16/346,943 US11314334B2 (en) 2018-05-14 2018-08-27 Gesture recognition apparatus, control method thereof, and display apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810455725.8A CN108694383B (zh) 2018-05-14 2018-05-14 一种手势识别装置及其控制方法、显示装置

Publications (2)

Publication Number Publication Date
CN108694383A true CN108694383A (zh) 2018-10-23
CN108694383B CN108694383B (zh) 2024-07-12

Family

ID=63847382

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810455725.8A Active CN108694383B (zh) 2018-05-14 2018-05-14 一种手势识别装置及其控制方法、显示装置

Country Status (3)

Country Link
US (1) US11314334B2 (zh)
CN (1) CN108694383B (zh)
WO (1) WO2019218521A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4250724A1 (en) * 2022-03-24 2023-09-27 Beijing Xiaomi Mobile Software Co., Ltd. Multi-sensor fusion system and autonomous mobile apparatus

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117008075B (zh) * 2023-10-07 2024-01-23 西安乾景防务技术有限公司 一种基于微波天线阵列的无线手势采集方法及系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101793516A (zh) * 2010-04-21 2010-08-04 北京领邦仪器技术有限公司 爆炸点位置自动测量装置
CN103425357A (zh) * 2013-09-04 2013-12-04 北京汇冠新技术股份有限公司 一种光学触摸屏的控制系统
US20140168372A1 (en) * 2012-12-17 2014-06-19 Eminent Electronic Technology Corp. Ltd. Sensing apparatus and sensing method for generating three-dimensional image information
CN107589845A (zh) * 2017-09-19 2018-01-16 京东方科技集团股份有限公司 一种显示系统

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8768158B2 (en) * 2010-02-01 2014-07-01 Canon Kabushiki Kaisha Image pickup apparatus, flash apparatus, and camera system
CN103782255B (zh) * 2011-09-09 2016-09-28 泰利斯航空电子学公司 交通工具娱乐系统的眼动追踪控制
US9118782B1 (en) * 2011-09-19 2015-08-25 Amazon Technologies, Inc. Optical interference mitigation
TWI535288B (zh) * 2014-06-13 2016-05-21 立普思股份有限公司 深度攝影機系統
JP6441465B2 (ja) * 2014-09-05 2018-12-19 クワーン チー インテリジェント フォトニック テクノロジー リミテッド 光信号の符号化/復号化方法及びその装置
US11297258B2 (en) * 2015-10-01 2022-04-05 Qualcomm Incorporated High dynamic range solid state image sensor and camera system
US20170244938A1 (en) * 2016-02-20 2017-08-24 Saad Al Mohizea Camera system with an automatic photo taking
CN106598235B (zh) * 2016-11-29 2019-10-22 歌尔科技有限公司 用于虚拟现实设备的手势识别方法、装置及虚拟现实设备
CN107145822B (zh) * 2017-03-24 2021-01-22 奥比中光科技集团股份有限公司 偏离深度相机的用户体感交互标定的方法和系统
CN107105093A (zh) * 2017-04-18 2017-08-29 广东欧珀移动通信有限公司 基于手部轨迹的拍照控制方法、装置及终端
CN107493428A (zh) 2017-08-09 2017-12-19 广东欧珀移动通信有限公司 拍摄控制方法和装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101793516A (zh) * 2010-04-21 2010-08-04 北京领邦仪器技术有限公司 爆炸点位置自动测量装置
US20140168372A1 (en) * 2012-12-17 2014-06-19 Eminent Electronic Technology Corp. Ltd. Sensing apparatus and sensing method for generating three-dimensional image information
CN103425357A (zh) * 2013-09-04 2013-12-04 北京汇冠新技术股份有限公司 一种光学触摸屏的控制系统
CN107589845A (zh) * 2017-09-19 2018-01-16 京东方科技集团股份有限公司 一种显示系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4250724A1 (en) * 2022-03-24 2023-09-27 Beijing Xiaomi Mobile Software Co., Ltd. Multi-sensor fusion system and autonomous mobile apparatus

Also Published As

Publication number Publication date
US20210294421A1 (en) 2021-09-23
WO2019218521A1 (en) 2019-11-21
US11314334B2 (en) 2022-04-26
CN108694383B (zh) 2024-07-12

Similar Documents

Publication Publication Date Title
US9542044B2 (en) Multi-touch positioning method and multi-touch screen
CN103576857B (zh) 凝视跟踪系统的快速唤醒
EP3333684A1 (en) Electronic device having a biometric sensor
CN101779183B (zh) 输入装置、控制装置、控制系统、控制方法及手持装置
JP4442877B2 (ja) 座標入力装置およびその制御方法
CN106164827B (zh) 用于输入事件处理的抽选策略
CN108121477A (zh) 触摸感测电路、触摸显示装置及触摸感测方法
CN101630213B (zh) 光触摸屏和光触摸屏光源以及触摸笔
US20140168164A1 (en) Multi-dimensional touch input vector system for sensing objects on a touch panel
CN110007793A (zh) 触摸电路及其驱动方法、触摸驱动电路和触摸显示装置
CN104869304A (zh) 显示对焦的方法和应用该方法的电子设备
CN104423721A (zh) 基于雷达眼的无框式多点触控人机交互方法及系统
KR20110050352A (ko) 복합형 터치스크린 장치 및 그의 스캔 방법
CN108694383A (zh) 一种手势识别装置及其控制方法、显示装置
CN102650919A (zh) 光学扫描式触控装置及其操作方法
CN106199616A (zh) 接近传感器及其控制方法
CN105807989A (zh) 一种手势触控方法和系统
CN105786225A (zh) 一种定位触控方法、装置及系统
CN202217252U (zh) 采用蓝牙通信的基于摄像头的触摸屏
CN105183242A (zh) 基于虚拟网格畸变区域识别的虚拟键盘及其控制方法
KR101964192B1 (ko) 시뮬레이션용 스마트 테이블 장치
CN101071350B (zh) 一种通过识别动态轨迹操作光标、视窗的装置
CN203606780U (zh) 多点触摸和手势识别融合系统
JP2016018455A (ja) 座標入力装置及びその制御方法、コンピュータプログラム
CN103064560B (zh) 一种多点触摸屏

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant