CN108898572B - 光斑提取方法 - Google Patents

光斑提取方法 Download PDF

Info

Publication number
CN108898572B
CN108898572B CN201810354501.8A CN201810354501A CN108898572B CN 108898572 B CN108898572 B CN 108898572B CN 201810354501 A CN201810354501 A CN 201810354501A CN 108898572 B CN108898572 B CN 108898572B
Authority
CN
China
Prior art keywords
light spot
light
spot
spots
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810354501.8A
Other languages
English (en)
Other versions
CN108898572A (zh
Inventor
刘伟
王健
宫小虎
田咪
杨孟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing 7Invensun Technology Co Ltd
Original Assignee
Beijing 7Invensun Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing 7Invensun Technology Co Ltd filed Critical Beijing 7Invensun Technology Co Ltd
Priority to CN201810354501.8A priority Critical patent/CN108898572B/zh
Publication of CN108898572A publication Critical patent/CN108898572A/zh
Priority to TW108109587A priority patent/TWI701940B/zh
Priority to PCT/CN2019/083496 priority patent/WO2019201337A1/zh
Application granted granted Critical
Publication of CN108898572B publication Critical patent/CN108898572B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/80Geometric correction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/77Determining position or orientation of objects or cameras using statistical methods

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Quality & Reliability (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Probability & Statistics with Applications (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)
  • Eye Examination Apparatus (AREA)

Abstract

本发明公开了一种光斑提取方法。该方法包括:确定多个光斑中每个光斑与瞳孔中心的距离,得到多个光斑距离参数;根据多个光斑距离参数在多个光斑中提取预设数量个光斑;获取预设数量个光斑中每两个光斑之间的距离信息,得到多个距离信息;确定多个距离信息中在预设方向上数值最小所对应的两个光斑,得到第一光斑集合,第一光斑集合光斑中的两个光斑在瞳孔中心的第一侧面;判断未在第一光斑集合中的剩余光斑是否同在第二侧面,其中,第二侧面以瞳孔中心为中心,相对于第一侧面的另一侧面;若剩余光斑不是同在第二侧面,输出光斑提取结果,其中,光斑提取结果中至少包括:第一光斑集合中的光斑和剩余光斑中距离瞳孔中心最近的光斑。

Description

光斑提取方法
技术领域
本发明涉及图像处理技术领域,具体而言,涉及一种光斑提取方法。
背景技术
在相关技术中,对于桌面设备或者VR等设备的光斑提取中,一般能够提取的光斑数量为两个,若用户使用该设备,需要提取光斑,会出现提取光斑时,对提取的光斑进行现场人工校正,这种光斑校正方式需要计算两个光斑的斜率来实现。而对于这种提取光斑的方式,存在很大的弊端,首先,其提取的光斑的数量较少,只有两个,无法满足硬件升级后多个光斑(如四个光斑)的计算需求,另外,还需要额外的光斑校正,提高人力成本,最终会导致光斑提取的效率较低,并且在校正过程中浪费大量的时间。
针对上述的相关技术中光斑提取过程中出现提取光斑数量较少,并且提取的效率较低的技术问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种光斑提取方法,以至少解决相关技术中光斑提取过程中出现提取光斑数量较少,并且提取的效率较低的技术问题。
根据本发明实施例的一个方面,提供了一种光斑提取方法,包括:确定多个光斑中每个光斑与瞳孔中心的距离,得到多个光斑距离参数;根据所述多个光斑距离参数在所述多个光斑中提取预设数量个光斑;获取所述预设数量个光斑中每两个光斑之间的距离信息,得到多个距离信息;确定所述多个距离信息中在预设方向上数值最小所对应的两个光斑,得到第一光斑集合,其中,所述第一光斑集合光斑中的两个光斑在所述瞳孔中心的第一侧面;判断未在所述第一光斑集合中的剩余光斑是否同在第二侧面,其中,所述第二侧面以所述瞳孔中心为中心,相对于所述第一侧面的另一侧面;若所述剩余光斑不是同在所述第二侧面,输出光斑提取结果,其中,所述光斑提取结果中至少包括:第一光斑集合中的光斑和所述剩余光斑中距离所述瞳孔中心最近的光斑。
进一步地,所述预设方向包括:第一预设方向和第二预设方向,其中,确定所述多个距离信息中在预设方向上数值最小所对应的两个光斑,得到第一光斑集合包括:确定所述多个距离信息中在所述第一预设方向上数值最小所对应的两个光斑,得到所述第一光斑集合;将所述第一光斑集合的光斑加入预设的目标光斑提取列表。
进一步地,每个光斑对应有X坐标和Y坐标,在得到所述第一光斑集合之后,还包括:选取所述第一光斑集合中的目标光斑,得到第一目标光斑;获取所述第一目标光斑在所述第一预设方向的X坐标,得到第一目标坐标;根据所述第一目标坐标,确定所述第一预设方向的边界,得到第一目标边界。
进一步地,在得到所述第一目标边界之后,还包括:若所述剩余光斑同在所述第二侧面,选取所述剩余光斑中在所述第一预设方向距离所述第一目标边界最近的光斑,得到第二目标光斑;选取所述第二目标光斑在所述第一预设方向的X坐标,得到第一候选光斑坐标;根据所述第一候选光斑坐标,确定第一候选光斑边界;将所述第一候选光斑边界加入第一候选光斑边界列表中。
进一步地,在将所述第一候选光斑边界加入第一候选光斑边界列表中之后,还包括:构建与所述目标光斑提取列表的各项光斑对应的光斑连接框;比较所述第一候选光斑边界列表中的光斑和所述光斑连接框的距离值,得到第一距离值;若所述第一距离值低于预设阈值,将所述第一候选光斑边界列表中的光斑加入所述目标光斑提取列表。
进一步地,还包括:确定所述多个距离信息中在所述第二预设方向上数值最小所对应的两个光斑,得到第二光斑集合,其中,所述第二光斑集合光斑中的两个光斑在所述瞳孔中心的第三侧面,且以所述瞳孔中心为中心,相对于所述第三侧面的另一侧面为第四侧面;若所述第二光斑集合的目标光斑未在所述第一光斑集合中,将所述目标光斑加入所述目标光斑提取列表。
进一步地,每个所述光斑对应有X坐标和Y坐标,在得到所述第二光斑集合后,所述方法还包括:选取所述第二光斑集合中的目标光斑,得到第三目标光斑;获取所述第三目标光斑在所述第二预设方向的Y坐标,得到第二目标坐标;根据所述第二目标坐标,确定所述第二预设方向的边界,得到第二目标边界。
进一步地,在得到所述第二目标边界之后,所述方法还包括:若未在所述第二光斑集合的剩余光斑不是同在第四侧面,输出光斑提取结果,其中,所述光斑提取结果中包括:所述第二光斑集合的光斑和未在所述第二光斑集合的剩余光斑中距离所述瞳孔中心最近的光斑;若未在所述第二光斑集合的剩余光斑是同在所述第四侧面,选取所述第二光斑集合中在所述第二预设方向距离所述第二目标边界最近的光斑,得到第四目标光斑;选取所述第四目标光斑在所述第二预设方向的Y坐标,得到第二候选光斑坐标;根据所述第二候选光斑坐标,确定第二候选光斑边界;将所述第二候选光斑边界加入第二候选光斑边界列表中。
进一步地,在将所述第二候选光斑边界加入第二候选光斑边界列表之后,还包括:构建与所述目标光斑提取列表的各项光斑对应的光斑连接框;比较所述第二候选光斑边界列表中的光斑和所述光斑连接框的距离值,得到第二距离值;若所述第二距离值低于预设阈值,将所述第二候选光斑边界列表中的光斑加入所述目标光斑提取列表。
进一步地,在确定所述目标光斑提取列表中的光斑数量达到预设提取数量后,输出所述目标光斑提取列表中的光斑。
进一步地,在得到所述目标光斑提取列表后,还包括:判断所述目标光斑提取列表的光斑所对应的矩形范围比值是否为预设比值,其中,所述矩形范围比值为所述目标光斑提取列表的光斑连接所形成的矩形对应的范围比值;若判断出所述目标光斑提取列表的光斑的矩形范围比值不是预设比值,切割所述光斑,以将所述光斑的矩形范围比值达到所述预设比值;确定所述目标光斑提取列表中的每个光斑中心坐标,得到多个光斑中心坐标;根据所述多个光斑中心坐标,获取每个所述光斑中心与所述瞳孔中心的距离参数,得到多个光斑中心距离值;输出所述多个光斑中心距离值中数值最小所对应的光斑的中心坐标。
进一步地,确定多个光斑中每个光斑与瞳孔中心的距离,得到多个光斑距离参数包括:判断当前光斑数量是否大于预设提取数量;若所述当前光斑数量大于所述预设提取数量,对多个光斑进行图像二值化处理,得到多个二值化光斑;计算多个二值化光斑中每个光斑与所述瞳孔中心的距离,得到所述多个光斑距离参数;若所述当前光斑数量低于等于所述预设提取数量,输出所有的光斑。
根据本发明实施例的另一方面,还提供了一种光斑提取装置,包括:第一确定单元,用于确定多个光斑中每个光斑与瞳孔中心的距离,得到多个光斑距离参数;提取单元,用于根据所述多个光斑距离参数在所述多个光斑中提取预设数量个光斑;获取单元,用于获取所述预设数量个光斑中每两个光斑之间的距离信息,得到多个距离信息;第二确定单元,用于确定所述多个距离信息中在预设方向上数值最小所对应的两个光斑,得到第一光斑集合,其中,所述第一光斑集合光斑中的两个光斑在所述瞳孔中心的第一侧面;判断单元,用于判断未在所述第一光斑集合中的剩余光斑是否同在第二侧面,其中,所述第二侧面以所述瞳孔中心为中心,相对于所述第一侧面的另一侧面;输出单元,用于若所述剩余光斑不是同在所述第二侧面,输出光斑提取结果,其中,所述光斑提取结果中至少包括:第一光斑集合中的光斑和所述剩余光斑中距离所述瞳孔中心最近的光斑。
进一步地,所述预设方向包括:第一预设方向和第二预设方向,其中,所述第二确定单元包括:第一确定模块,用于确定所述多个距离信息中在所述第一预设方向上数值最小所对应的两个光斑,得到所述第一光斑集合;第一增加模块,用于将所述第一光斑集合的光斑加入预设的目标光斑提取列表。
进一步地,每个光斑对应有X坐标和Y坐标,上述装置还包括:第一选取模块,用于在得到所述第一光斑集合之后,选取所述第一光斑集合中的目标光斑,得到第一目标光斑;第一获取模块,用于获取所述第一目标光斑在所述第一预设方向的X坐标,得到第一目标坐标;第一确定模块,用于根据所述第一目标坐标,确定所述第一预设方向的边界,得到第一目标边界。
进一步地,该装置还包括:第二选取模块,用于在得到所述第一目标边界之后,若所述剩余光斑同在所述第二侧面,选取所述剩余光斑中在所述第一预设方向距离所述第一目标边界最近的光斑,得到第二目标光斑;第三选取模块,用于选取所述第二目标光斑在所述第一预设方向的X坐标,得到第一候选光斑坐标;第二确定模块,用于根据所述第一候选光斑坐标,确定第一候选光斑边界;第二增加模块,用于将所述第一候选光斑边界加入第一候选光斑边界列表中。
进一步地,该装置还包括:第一构建模块,用于在将所述第一候选光斑边界加入第一候选光斑边界列表中之后,构建与所述目标光斑提取列表的各项光斑对应的光斑连接框;第一比较模块,用于比较所述第一候选光斑边界列表中的光斑和所述光斑连接框的距离值,得到第一距离值;第三增加模块,用于若所述第一距离值低于预设阈值,将所述第一候选光斑边界列表中的光斑加入所述目标光斑提取列表。
进一步地,该装置还包括:第三确定模块,用于确定所述多个距离信息中在所述第二预设方向上数值最小所对应的两个光斑,得到第二光斑集合,其中,所述第二光斑集合光斑中的两个光斑在所述瞳孔中心的第三侧面,且以所述瞳孔中心为中心,相对于所述第三侧面的另一侧面为第四侧面;第四增加模块,用于若所述第二光斑集合的目标光斑未在所述第一光斑集合中,将所述目标光斑加入所述目标光斑提取列表。
进一步地,每个所述光斑对应有X坐标和Y坐标,上述装置还包括:第四选取模块,用于在得到所述第二光斑集合后,选取所述第二光斑集合中的目标光斑,得到第三目标光斑;第二获取模块,用于获取所述第三目标光斑在所述第二预设方向的Y坐标,得到第二目标坐标;第四确定模块,用于根据所述第二目标坐标,确定所述第二预设方向的边界,得到第二目标边界。
进一步地,该装置还包括:第一输出模块,用于在得到所述第二目标边界之后,若未在所述第二光斑集合的剩余光斑不是同在第四侧面,输出光斑提取结果,其中,所述光斑提取结果中包括:所述第二光斑集合的光斑和未在所述第二光斑集合的剩余光斑中距离所述瞳孔中心最近的光斑;第五选取模块,用于若未在所述第二光斑集合的剩余光斑是同在所述第四侧面,选取所述第二光斑集合中在所述第二预设方向距离所述第二目标边界最近的光斑,得到第四目标光斑;第六选取模块,用于选取所述第四目标光斑在所述第二预设方向的Y坐标,得到第二候选光斑坐标;第五确定模块,用于根据所述第二候选光斑坐标,确定第二候选光斑边界;第五增加模块,用于将所述第二候选光斑边界加入第二候选光斑边界列表中。
进一步地,该装置还包括:第二构建模块,用于在将所述第二候选光斑边界加入第二候选光斑边界列表之后,构建与所述目标光斑提取列表的各项光斑对应的光斑连接框;第二比较模块,用于比较所述第二候选光斑边界列表中的光斑和所述光斑连接框的距离值,得到第二距离值;第六增加模块,用于若所述第二距离值低于预设阈值,将所述第二候选光斑边界列表中的光斑加入所述目标光斑提取列表。
进一步地,该装置还包括:第二输出模块,用于在确定所述目标光斑提取列表中的光斑数量达到预设提取数量后,输出所述目标光斑提取列表中的光斑。
进一步地,该装置还包括:第一判断模块,用于在得到所述目标光斑提取列表后,判断所述目标光斑提取列表的光斑所对应的矩形范围比值是否为预设比值,其中,所述矩形范围比值为所述目标光斑提取列表的光斑连接所形成的矩形对应的范围比值;切割模块,用于在判断出所述目标光斑提取列表的光斑的矩形范围比值不是预设比值,切割所述光斑,以将所述光斑的矩形范围比值达到所述预设比值;第六确定模块,用于确定所述目标光斑提取列表中的每个光斑中心坐标,得到多个光斑中心坐标;第三获取模块,用于根据所述多个光斑中心坐标,获取每个所述光斑中心与所述瞳孔中心的距离参数,得到多个光斑中心距离值;第三输出模块,用于输出所述多个光斑中心距离值中数值最小所对应的光斑的中心坐标。
进一步地,所述第一确定单元包括:第二判断模块,用于判断当前光斑数量是否大于预设提取数量;处理模块,用于若所述当前光斑数量大于所述预设提取数量,对多个光斑进行图像二值化处理,得到多个二值化光斑;计算模块,用于计算多个二值化光斑中每个光斑与所述瞳孔中心的距离,得到所述多个光斑距离参数;第四输出模块,用于若所述当前光斑数量低于等于所述预设提取数量,输出所有的光斑。
根据本发明实施例的另一方面,还提供了一种存储介质,所述存储介质用于存储程序,其中,所述程序在被处理器执行时控制所述存储介质所在设备执行上述任意一项所述的光斑提取方法。
根据本发明实施例的另一方面,还提供了一种处理器,所述处理器用于运行程序,其中,所述程序运行时执行上述任意一项所述的光斑提取方法。
在本发明实施例中,可以先确定出多个光斑中每个光斑与瞳孔中心的距离,得到多个光斑距离参数,根据多个光斑距离参数在多个光斑中提取预设数量个光斑,获取预设数量个光斑中每两个光斑之间的距离信息,得到多个距离信息,确定多个距离信息中在预设方向上数值最小所对应的两个光斑,得到第一光斑集合,其中,第一光斑集合光斑中的两个光斑在瞳孔中心的第一侧面,判断未在第一光斑集合中的剩余光斑是否同在第二侧面,其中,第二侧面以瞳孔中心为中心,相对于第一侧面的另一侧面,若剩余光斑不是同在第二侧面,输出光斑提取结果,其中,光斑提取结果中至少包括:第一光斑集合中的光斑和剩余光斑中距离瞳孔中心最近的光斑。在该实施例中,可以提取出预设个数量的光斑,即可以提取超出两个光斑的光斑,并且根据光斑与瞳孔中心的距离,确定出最终输出的光斑,输出的光斑数量较多,还可以针对光斑的当前位置进行光斑校正,进而解决相关技术中光斑提取过程中出现提取光斑数量较少,并且提取的效率较低的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的光斑提取方法的流程图;
图2是根据本发明实施例的一种光斑提取的示意图;
图3是根据本发明实施例的另一种可选的光斑提取装置示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
根据本发明实施例,提供了一种光斑提取的方法实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
本发明下述实施例,可以应用于各个VR设备或者桌面设备中,本发明对于具体使用的设备不做具体限制,只要是需要进行图像处理,需要提取图像中的光斑都可以使用本发明的下述技术方案。其使用的地方可以是在各种桌面设备中,也可以是VR设备中,以VR设备为例做出说明,在用户佩戴VR眼镜后,需要提取出目标光斑,光斑提取的数量在本发明中可以是多个,例如,4个,如果在对图像进行处理后,发现光斑少于4个,这时可以直接输出所有的光斑,而如果光斑数量大于4个,则需要进行光斑提取,得到4个目标光斑,并且根据本发明下述实施例可以对粘连的光斑进行切割,得到预设比例的光斑。
可选的,本发明下述实施例中还可以在找到各个光斑后,确认眼球的注视点,其中,在利用瞳孔角膜反射法求解眼球注视点时,可以通过多个红外光源向眼球投射红外光线,红外摄像机对这些红外光线在角膜上形成的光斑进行拍照,由此拍摄带有光斑的眼球图像,当眼球转动时,瞳孔与光斑的相对位置发生变化,利用这样的变化来计算瞳孔的位置,由此计算眼球注视点,而通过本发明下述实施例中的内容可以计算得到各个光斑的位置,从而确定出注视点的位置。
实施例一
下面结合优选的实施步骤对本发明进行说明,图1是根据本发明实施例的光斑提取方法的流程图,如图1所示,该方法包括如下步骤:
步骤S102,确定多个光斑中每个光斑与瞳孔中心的距离,得到多个光斑距离参数;
需要说明的是,确定多个光斑中每个光斑与瞳孔中心的距离,得到多个光斑距离参数包括:判断当前光斑数量是否大于预设提取数量;若当前光斑数量大于预设提取数量,对多个光斑进行图像二值化处理,得到多个二值化光斑;计算多个二值化光斑中每个光斑与瞳孔中心的距离,得到多个光斑距离参数;若当前光斑数量低于等于预设提取数量,输出所有的光斑。
即可以判断光斑数量是否大于预设的提取数量,若低于预设的提取数量,则可以直接输出所有的光斑,而如果光斑数量大于预设的提取数量,则可以进行如下的光斑提取,得到想要的目标光斑。
可选的,上述对多个光斑进行图像二值化处理可以是在得到复杂的彩色图像或者多种类型的图像后,对图形进行初始的二值化处理,以得到二值化后的光斑。
步骤S104,根据多个光斑距离参数在多个光斑中提取预设数量个光斑。
其中,本发明中对预设数量并不会做具体限定,优选的,预设数量为4个。即在上述步骤中,可以提取4个距离瞳孔中心最近的光斑作为候选光斑,并且在后续的步骤中确定这些光斑是否为最终的想要的目标光斑(即在得到候选光斑后,对候选光斑进行光斑校正)。从而在确定出4个目标光斑后,将目标光斑输出,以确定出用户的注视点的位置。
步骤S106,获取预设数量个光斑中每两个光斑之间的距离信息,得到多个距离信息。
步骤S108,确定多个距离信息中在预设方向上数值最小所对应的两个光斑,得到第一光斑集合,其中,第一光斑集合光斑中的两个光斑在瞳孔中心的第一侧面。
可选的,本发明实施例中的预设方向包括:第一预设方向和第二预设方向,本发明实施例中可以自行设定第一预设方向和第二预设方向,例如,相对于瞳孔中心的左右方向为第一预设方向,其坐标轴所对应的方向可以对应于X方向;而相对于瞳孔中心的上下方向为第二预设方向,其坐标轴所对应的方向可以对应于Y方向。而上述步骤S108,在确定多个距离信息中在预设方向上数值最小所对应的两个光斑,得到第一光斑集合包括:确定多个距离信息中在第一预设方向上数值最小所对应的两个光斑,得到第一光斑集合;将第一光斑集合的光斑加入预设的目标光斑提取列表。
一种可选的实施方式,每个光斑可以对应有X坐标和Y坐标,在本发明实施例中可以设定相对于第一预设方向的坐标为X坐标,设定相对于第二预设方向的坐标为Y坐标。本发明在得到第一光斑集合之后,还可以选取第一光斑集合中的目标光斑,得到第一目标光斑;获取第一目标光斑在第一预设方向的X坐标,得到第一目标坐标;根据第一目标坐标,确定第一预设方向的边界,得到第一目标边界。在选取第一光斑集合中的目标光斑时,可以是选取第一光斑集合中的任意一个光斑坐标目标光斑,并以该目标光斑的X坐标作为第一预设方向的边界,得到第一目标边界,本发明实施例设置的目标边界可以是在提取光斑时设定的边界,不提取超出该边界的光斑。
另一种可选的实施方式,在得到第一目标边界之后,若未在第一光斑集合中的剩余光斑同在第二侧面,选取剩余光斑中在第一预设方向距离第一目标边界最近的光斑,得到第二目标光斑;选取第二目标光斑在第一预设方向的X坐标,得到第一候选光斑坐标;根据第一候选光斑坐标,确定第一候选光斑边界;将第一候选光斑边界加入第一候选光斑边界列表中。即可以通过选取剩余光斑在第一预设方向距离边界最近的光斑,选取其X坐标,将其加入候选边界列表,即可以将选取的剩余光斑中的光斑作为候选的光斑。
可选的,在将第一候选光斑边界加入第一候选光斑边界列表中之后,还包括:构建与目标光斑提取列表的各项光斑对应的光斑连接框;比较第一候选光斑边界列表中的光斑和光斑连接框的距离值,得到第一距离值;若第一距离值低于预设阈值,将第一候选光斑边界列表中的光斑加入目标光斑提取列表。
步骤S110,判断未在第一光斑集合中的剩余光斑是否同在第二侧面,其中,第二侧面以瞳孔中心为中心,相对于第一侧面的另一侧面。
步骤S112,若剩余光斑不是同在第二侧面,输出光斑提取结果,其中,光斑提取结果中至少包括:第一光斑集合中的光斑和剩余光斑中距离瞳孔中心最近的光斑。
可选的,本发明实施例还包括:确定多个距离信息中在第二预设方向上数值最小所对应的两个光斑,得到第二光斑集合,其中,第二光斑集合光斑中的两个光斑在瞳孔中心的第三侧面,且以瞳孔中心为中心,相对于第三侧面的另一侧面为第四侧面;若第二光斑集合的目标光斑未在第一光斑集合中,将目标光斑加入目标光斑提取列表。
另一种可选的实施方式,每个光斑对应有X坐标和Y坐标,在得到第二光斑集合后,还可以选取第二光斑集合中的目标光斑,得到第三目标光斑;获取第三目标光斑在第二预设方向的Y坐标,得到第二目标坐标;根据第二目标坐标,确定第二预设方向的边界,得到第二目标边界。
对于本发明中的可选的实施方式,在得到第二目标边界之后还可以将未在第二光斑集合的剩余光斑不是同在第四侧面时,输出光斑提取结果,其中,光斑提取结果中包括:第二光斑集合的光斑和未在第二光斑集合的剩余光斑中距离瞳孔中心最近的光斑;若未在第二光斑集合的剩余光斑是同在第四侧面,选取第二光斑集合中在第二预设方向距离第二目标边界最近的光斑,得到第四目标光斑;选取第四目标光斑在第二预设方向的Y坐标,得到第二候选光斑坐标;根据第二候选光斑坐标,确定第二候选光斑边界;将第二候选光斑边界加入第二候选光斑边界列表中。
可选的,本发明实施例中的第一侧面和第二侧面是相对于第一预设方向,而第三侧面和第四侧面是相对于第二预设方向的,在判断时,根据实际情况做出最终的侧面确定。
另外,在将第二候选光斑边界加入第二候选光斑边界列表之后,还包括:构建与目标光斑提取列表的各项光斑对应的光斑连接框;比较第二候选光斑边界列表中的光斑和光斑连接框的距离值,得到第二距离值;若第二距离值低于预设阈值,将第二候选光斑边界列表中的光斑加入目标光斑提取列表。
可选的,在确定目标光斑提取列表中的光斑数量达到预设提取数量后,输出目标光斑提取列表中的光斑。即若得到目标光斑提取列表中的光斑后,并确定这些光斑最终想要的光斑,则可以输出目标光斑提取列表中的光斑。其中,所述目标光斑提取列表中的光斑数量可以为预设数量个,如预设数量为4个,如果在开始提取光斑时,发现光斑达不到4个,则可以直接输出所有的光斑,而如果在开始提取光斑后,发现光斑数量超出4个,则可以通过上述实施例,得到目标光斑提取列表,得到最终想要的4个光斑,从而在得到最终的目标光斑提取列表中的光斑后,输出所有的4个光斑。
而对于光斑中粘连或者距离较近的光斑,可以进行如下方式的处理。
本发明一种可选的实施方式,在得到目标光斑提取列表后,还可以判断目标光斑提取列表的光斑所对应的矩形范围比值是否为预设比值,其中,矩形范围比值为所述目标光斑提取列表的光斑连接所形成的矩形对应的范围比值;若判断出目标光斑提取列表的光斑的矩形范围比值不是预设比值,切割光斑,以将光斑的矩形范围比值达到预设比值;确定目标光斑提取列表中的每个光斑中心坐标,得到多个光斑中心坐标;根据多个光斑中心坐标,获取每个光斑中心与瞳孔中心的距离参数,得到多个光斑中心距离值;输出多个光斑中心距离值中数值最小所对应的光斑的中心坐标。
其中,本发明实施例中对于目标光斑的提取列表的光斑所形成的矩形形状不做具体限定,优选的,在目标光斑提取列表中的光斑为4个时,矩形可以是长方形或者正方形等,而预设比值可以预先设定的矩形的比值,例如,设置长方形的范围比值为1:1,本发明对于该种实施方式并未做具体限定。
通过上述步骤,可以先确定出多个光斑中每个光斑与瞳孔中心的距离,得到多个光斑距离参数,根据多个光斑距离参数在多个光斑中提取预设数量个光斑,获取预设数量个光斑中每两个光斑之间的距离信息,得到多个距离信息,确定多个距离信息中在预设方向上数值最小所对应的两个光斑,得到第一光斑集合,其中,第一光斑集合光斑中的两个光斑在瞳孔中心的第一侧面,判断未在第一光斑集合中的剩余光斑是否同在第二侧面,其中,第二侧面以瞳孔中心为中心,相对于第一侧面的另一侧面,若剩余光斑不是同在第二侧面,输出光斑提取结果,其中,光斑提取结果中至少包括:第一光斑集合中的光斑和剩余光斑中距离瞳孔中心最近的光斑。在该实施例中,可以提取出预设个数量的光斑,即可以提取超出两个光斑的光斑,并且根据光斑与瞳孔中心的距离,确定出最终输出的光斑,输出的光斑数量较多,还可以针对光斑的当前位置进行光斑校正,进而解决相关技术中光斑提取过程中出现提取光斑数量较少,并且提取的效率较低的技术问题。
实施例二
下面结合图2对本发明进行说明,图2是根据本发明实施例的一种光斑提取的示意图,图2中包括了瞳孔中心、X边界、Y边界,并且确定出x1、y1和y2等光斑点,在该实施例中,提取的光斑数量为4个,对应于上述的预设个数量,而第一预设方向为X方向,第二预设方向为Y方向。其提取的具体实现方式可以如下所述:
步骤201、开始提取光斑。
步骤202、判断光斑数量是否不小于4。
若是,执行步骤203,若否,执行步骤214。
步骤203、保留距离最小的四个光斑为候选光斑。
步骤204、开始光斑校正部分。
步骤205、选取X方向上距离最近的两个光斑之一的X坐标X1为一个X方向上的边界,并将这两个光斑加入必选列表。
步骤206、判断剩余两个光斑是否在同一侧面。即相对于上述必选列表中的两个光斑是否在瞳孔中心的另一侧面。
若是,执行步骤207,若否,执行步骤214。
步骤207、选取剩余两光斑在X方向上距离X1最近的一个,选取其X坐标X2加入X方向候选边界列表。
步骤208、选取Y方向上距离最近的两光斑之一的y坐标Y1为一个y方向上的边界,并将其中尚未加入必选列表的光斑加入必选列表。
步骤209、判断剩余两个光斑是否在同一侧面。即相对于上述选取Y方向上距离最近的两光斑是否在瞳孔中心的另一侧面。
若是,执行步骤210,若否,执行步骤214。
步骤210、选取剩余两光斑在Y方向上距离Y1最近的一个,选取其Y坐标Y2加入Y方向候选边界列表。
步骤211、判断候选列表元素坐标距离必选列表连接框的距离是否低于预设阈值。
若是,执行步骤212,若否,输出当前所有的必选列表中的光斑。
步骤212、将候选列表当前元素加入必选列表。
步骤213、若必选列表元素最小范围矩形长宽比不是为预设比例(如1:1),将粘连光斑最小包围切割为预设比例的几部分,计算每部分中心坐标,保留距离瞳孔中心最近的一个作为光斑中心坐标。本发明中对于具体的比例不做限定,可以为1:1,也可以为0.9:1.1,或者1.2:0.8等。
步骤214、输出满足条件的光斑。
通过上述方式,可以对预设数量为4个的光斑进行提取,并最终输出想要的光斑,以通过光斑位置和光斑大小确定出用户当前的注视点。
根据本发明实施例的另一方面,还提供了一种存储介质,存储介质用于存储程序,其中,程序在被处理器执行时控制存储介质所在设备执行上述任意一项的光斑提取方法。
根据本发明实施例的另一方面,还提供了一种处理器,处理器用于运行程序,其中,程序运行时执行上述任意一项的光斑提取方法。
实施例三
图3是根据本发明实施例的另一种可选的光斑提取装置示意图,如图3所示,该装置可以包括:第一确定单元31,用于确定多个光斑中每个光斑与瞳孔中心的距离,得到多个光斑距离参数;提取单元32,用于根据多个光斑距离参数在多个光斑中提取预设数量个光斑;获取单元33,用于获取预设数量个光斑中每两个光斑之间的距离信息,得到多个距离信息;第二确定单元34,用于确定多个距离信息中在预设方向上数值最小所对应的两个光斑,得到第一光斑集合,其中,第一光斑集合光斑中的两个光斑在瞳孔中心的第一侧面;判断单元35,用于判断未在第一光斑集合中的剩余光斑是否同在第二侧面,其中,第二侧面以瞳孔中心为中心,相对于第一侧面的另一侧面;输出单元36,用于若剩余光斑不是同在第二侧面,输出光斑提取结果,其中,光斑提取结果中至少包括:第一光斑集合中的光斑和剩余光斑中距离瞳孔中心最近的光斑。
通过上述装置,可以先通过第一确定单元31确定出多个光斑中每个光斑与瞳孔中心的距离,得到多个光斑距离参数,通过提取单元32根据多个光斑距离参数在多个光斑中提取预设数量个光斑,通过获取单元33获取预设数量个光斑中每两个光斑之间的距离信息,得到多个距离信息,通过第二确定单元34确定多个距离信息中在预设方向上数值最小所对应的两个光斑,得到第一光斑集合,其中,第一光斑集合光斑中的两个光斑在瞳孔中心的第一侧面,通过判断单元35判断未在第一光斑集合中的剩余光斑是否同在第二侧面,其中,第二侧面以瞳孔中心为中心,相对于第一侧面的另一侧面,若剩余光斑不是同在第二侧面,通过输出单元36输出光斑提取结果,其中,光斑提取结果中至少包括:第一光斑集合中的光斑和剩余光斑中距离瞳孔中心最近的光斑。在该实施例中,可以提取出预设个数量的光斑,即可以提取超出两个光斑的光斑,并且根据光斑与瞳孔中心的距离,确定出最终输出的光斑,输出的光斑数量较多,还可以针对光斑的当前位置进行光斑校正,进而解决相关技术中光斑提取过程中出现提取光斑数量较少,并且提取的效率较低的技术问题。
可选的,预设方向包括:第一预设方向和第二预设方向,其中,第二确定单元包括:第一确定模块,用于确定多个距离信息中在第一预设方向上数值最小所对应的两个光斑,得到第一光斑集合;第一增加模块,用于将第一光斑集合的光斑加入预设的目标光斑提取列表。
需要说明的是,每个光斑对应有X坐标和Y坐标,上述装置还包括:第一选取模块,用于在得到第一光斑集合之后,选取第一光斑集合中的目标光斑,得到第一目标光斑;第一获取模块,用于获取第一目标光斑在第一预设方向的X坐标,得到第一目标坐标;第一确定模块,用于根据第一目标坐标,确定第一预设方向的边界,得到第一目标边界。
该装置还包括:第二选取模块,用于在得到第一目标边界之后,若剩余光斑同在第二侧面,选取剩余光斑中在第一预设方向距离第一目标边界最近的光斑,得到第二目标光斑;第三选取模块,用于选取第二目标光斑在第一预设方向的X坐标,得到第一候选光斑坐标;第二确定模块,用于根据第一候选光斑坐标,确定第一候选光斑边界;第二增加模块,用于将第一候选光斑边界加入第一候选光斑边界列表中。
可选的,该装置还包括:第一构建模块,用于在将第一候选光斑边界加入第一候选光斑边界列表中之后,构建与目标光斑提取列表的各项光斑对应的光斑连接框;第一比较模块,用于比较第一候选光斑边界列表中的光斑和光斑连接框的距离值,得到第一距离值;第三增加模块,用于若第一距离值低于预设阈值,将第一候选光斑边界列表中的光斑加入目标光斑提取列表。
另一种可选的实施方式,该装置还包括:第三确定模块,用于确定多个距离信息中在第二预设方向上数值最小所对应的两个光斑,得到第二光斑集合,其中,第二光斑集合光斑中的两个光斑在瞳孔中心的第三侧面,且以瞳孔中心为中心,相对于第三侧面的另一侧面为第四侧面;第四增加模块,用于若第二光斑集合的目标光斑未在第一光斑集合中,将目标光斑加入目标光斑提取列表。
对于上述实施方式,每个光斑对应有X坐标和Y坐标,上述装置还包括:第四选取模块,用于在得到第二光斑集合后,选取第二光斑集合中的目标光斑,得到第三目标光斑;第二获取模块,用于获取第三目标光斑在第二预设方向的Y坐标,得到第二目标坐标;第四确定模块,用于根据第二目标坐标,确定第二预设方向的边界,得到第二目标边界。
可选的,该装置还包括:第一输出模块,用于在得到第二目标边界之后,若未在第二光斑集合的剩余光斑不是同在第四侧面,输出光斑提取结果,其中,光斑提取结果中包括:第二光斑集合的光斑和未在第二光斑集合的剩余光斑中距离瞳孔中心最近的光斑;第五选取模块,用于若未在第二光斑集合的剩余光斑是同在第四侧面,选取第二光斑集合中在第二预设方向距离第二目标边界最近的光斑,得到第四目标光斑;第六选取模块,用于选取第四目标光斑在第二预设方向的Y坐标,得到第二候选光斑坐标;第五确定模块,用于根据第二候选光斑坐标,确定第二候选光斑边界;第五增加模块,用于将第二候选光斑边界加入第二候选光斑边界列表中。
另外,该装置还包括:第二构建模块,用于在将第二候选光斑边界加入第二候选光斑边界列表之后,构建与目标光斑提取列表的各项光斑对应的光斑连接框;第二比较模块,用于比较第二候选光斑边界列表中的光斑和光斑连接框的距离值,得到第二距离值;第六增加模块,用于若第二距离值低于预设阈值,将第二候选光斑边界列表中的光斑加入目标光斑提取列表。
可选的,该装置还包括:第二输出模块,用于在确定目标光斑提取列表中的光斑数量达到预设提取数量后,输出目标光斑提取列表中的光斑。
另一种可选的实施方式,该装置还包括:第一判断模块,用于在得到目标光斑提取列表后,判断目标光斑提取列表的光斑所对应的矩形范围比值是否为预设比值,其中,矩形范围比值为所述目标光斑提取列表的光斑连接所形成的矩形对应的范围比值;切割模块,用于在判断出目标光斑提取列表的光斑的矩形范围比值不是预设比值,切割光斑,以将光斑的矩形范围比值达到预设比值;第六确定模块,用于确定目标光斑提取列表中的每个光斑中心坐标,得到多个光斑中心坐标;第三获取模块,用于根据多个光斑中心坐标,获取每个光斑中心与瞳孔中心的距离参数,得到多个光斑中心距离值;第三输出模块,用于输出多个光斑中心距离值中数值最小所对应的光斑的中心坐标。
另外,第一确定单元包括:第二判断模块,用于判断当前光斑数量是否大于预设提取数量;处理模块,用于若当前光斑数量大于预设提取数量,对多个光斑进行图像二值化处理,得到多个二值化光斑;计算模块,用于计算多个二值化光斑中每个光斑与瞳孔中心的距离,得到多个光斑距离参数;第四输出模块,用于若当前光斑数量低于等于预设提取数量,输出所有的光斑。
上述的光斑提取装置还可以包括处理器和存储器,上述第一确定单元31、提取单元32、获取单元33、第二确定单元34、判断单元35、输出单元36等均作为程序单元存储在存储器中,由处理器执行存储在存储器中的上述程序单元来实现相应的功能。
处理器中包含内核,由内核去存储器中调取相应的程序单元。内核可以设置一个或以上,通过调整内核参数来输出目标数量个光斑。
存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM),存储器包括至少一个存储芯片。
本发明实施例提供了一种设备,设备包括处理器、存储器及存储在存储器上并可在处理器上运行的程序,处理器执行程序时实现以下步骤:确定多个光斑中每个光斑与瞳孔中心的距离,得到多个光斑距离参数;根据多个光斑距离参数在多个光斑中提取预设数量个光斑;获取预设数量个光斑中每两个光斑之间的距离信息,得到多个距离信息;确定多个距离信息中在预设方向上数值最小所对应的两个光斑,得到第一光斑集合,其中,第一光斑集合光斑中的两个光斑在瞳孔中心的第一侧面;判断未在第一光斑集合中的剩余光斑是否同在第二侧面,其中,第二侧面以瞳孔中心为中心,相对于第一侧面的另一侧面;若剩余光斑不是同在第二侧面,输出光斑提取结果,其中,光斑提取结果中至少包括:第一光斑集合中的光斑和剩余光斑中距离瞳孔中心最近的光斑。
可选的,预设方向包括:第一预设方向和第二预设方向,处理器执行程序时,还可以确定多个距离信息中在第一预设方向上数值最小所对应的两个光斑,得到第一光斑集合;将第一光斑集合的光斑加入预设的目标光斑提取列表。
可选的,每个光斑对应有X坐标和Y坐标,处理器执行程序时,还可以在得到第一光斑集合之后,选取第一光斑集合中的目标光斑,得到第一目标光斑;获取第一目标光斑在第一预设方向的X坐标,得到第一目标坐标;根据第一目标坐标,确定第一预设方向的边界,得到第一目标边界。
可选的,处理器执行程序时,还可以在得到第一目标边界之后,若剩余光斑同在第二侧面,选取剩余光斑中在第一预设方向距离第一目标边界最近的光斑,得到第二目标光斑;选取第二目标光斑在第一预设方向的X坐标,得到第一候选光斑坐标;根据第一候选光斑坐标,确定第一候选光斑边界;将第一候选光斑边界加入第一候选光斑边界列表中。
可选的,处理器执行程序时,还可以在将第一候选光斑边界加入第一候选光斑边界列表中之后,构建与目标光斑提取列表的各项光斑对应的光斑连接框;比较第一候选光斑边界列表中的光斑和光斑连接框的距离值,得到第一距离值;若第一距离值低于预设阈值,将第一候选光斑边界列表中的光斑加入目标光斑提取列表。
可选的,处理器执行程序时,还可以确定多个距离信息中在第二预设方向上数值最小所对应的两个光斑,得到第二光斑集合,其中,第二光斑集合光斑中的两个光斑在瞳孔中心的第三侧面,且以瞳孔中心为中心,相对于第三侧面的另一侧面为第四侧面;若第二光斑集合的目标光斑未在第一光斑集合中,将目标光斑加入目标光斑提取列表。
可选的,处理器执行程序时,还可以选取第二光斑集合中的目标光斑,得到第三目标光斑;获取第三目标光斑在第二预设方向的Y坐标,得到第二目标坐标;根据第二目标坐标,确定第二预设方向的边界,得到第二目标边界。
可选的,处理器执行程序时,还可以在未在第二光斑集合的剩余光斑不是同在第四侧面,输出光斑提取结果,其中,光斑提取结果中包括:第二光斑集合的光斑和未在第二光斑集合的剩余光斑中距离瞳孔中心最近的光斑;若未在第二光斑集合的剩余光斑是同在第四侧面,选取第二光斑集合中在第二预设方向距离第二目标边界最近的光斑,得到第四目标光斑;选取第四目标光斑在第二预设方向的Y坐标,得到第二候选光斑坐标;根据第二候选光斑坐标,确定第二候选光斑边界;将第二候选光斑边界加入第二候选光斑边界列表中。
可选的,处理器执行程序时,还可以在将第二候选光斑边界加入第二候选光斑边界列表之后,构建与目标光斑提取列表的各项光斑对应的光斑连接框;比较第二候选光斑边界列表中的光斑和光斑连接框的距离值,得到第二距离值;若第二距离值低于预设阈值,将第二候选光斑边界列表中的光斑加入目标光斑提取列表。
可选的,处理器执行程序时,还可以在确定目标光斑提取列表中的光斑数量达到预设提取数量后,输出目标光斑提取列表中的光斑。
可选的,处理器执行程序时,还可以在得到目标光斑提取列表后,判断目标光斑提取列表的光斑所对应的矩形范围比值是否为预设比值,其中,矩形范围比值为所述目标光斑提取列表的光斑连接所形成的矩形对应的范围比值;若判断出目标光斑提取列表的光斑的矩形范围比值不是预设比值,切割光斑,以将光斑的矩形范围比值达到预设比值;确定目标光斑提取列表中的每个光斑中心坐标,得到多个光斑中心坐标;根据多个光斑中心坐标,获取每个光斑中心与瞳孔中心的距离参数,得到多个光斑中心距离值;输出多个光斑中心距离值中数值最小所对应的光斑的中心坐标。
可选的,处理器执行程序时,还可以判断当前光斑数量是否大于预设提取数量;若当前光斑数量大于预设提取数量,对多个光斑进行图像二值化处理,得到多个二值化光斑;计算多个二值化光斑中每个光斑与瞳孔中心的距离,得到多个光斑距离参数;若当前光斑数量低于等于预设提取数量,输出所有的光斑。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种光斑提取方法,其特征在于,包括:
确定多个光斑中每个光斑与瞳孔中心的距离,得到多个光斑距离参数;
根据所述多个光斑距离参数在所述多个光斑中提取预设数量个光斑;
获取所述预设数量个光斑中每两个光斑之间的距离信息,得到多个距离信息;
确定所述多个距离信息中在预设方向上数值最小所对应的两个光斑,得到第一光斑集合,其中,所述第一光斑集合光斑中的两个光斑在所述瞳孔中心的第一侧面;
判断未在所述第一光斑集合中的剩余光斑是否同在第二侧面,其中,所述第二侧面以所述瞳孔中心为中心,相对于所述第一侧面的另一侧面;
若所述剩余光斑不是同在所述第二侧面,输出光斑提取结果,其中,所述光斑提取结果中至少包括:第一光斑集合中的光斑和所述剩余光斑中距离所述瞳孔中心最近的光斑。
2.根据权利要求1所述的方法,其特征在于,所述预设方向包括:第一预设方向和第二预设方向,其中,确定所述多个距离信息中在预设方向上数值最小所对应的两个光斑,得到第一光斑集合包括:
确定所述多个距离信息中在所述第一预设方向上数值最小所对应的两个光斑,得到所述第一光斑集合;
将所述第一光斑集合的光斑加入预设的目标光斑提取列表。
3.根据权利要求2所述的方法,其特征在于,每个光斑对应有X坐标和Y坐标,在得到所述第一光斑集合之后,还包括:
选取所述第一光斑集合中的目标光斑,得到第一目标光斑;
获取所述第一目标光斑在所述第一预设方向的X坐标,得到第一目标坐标;
根据所述第一目标坐标,确定所述第一预设方向的边界,得到第一目标边界。
4.根据权利要求3所述的方法,其特征在于,在得到所述第一目标边界之后,还包括:
若所述剩余光斑同在所述第二侧面,选取所述剩余光斑中在所述第一预设方向距离所述第一目标边界最近的光斑,得到第二目标光斑;
选取所述第二目标光斑在所述第一预设方向的X坐标,得到第一候选光斑坐标;
根据所述第一候选光斑坐标,确定第一候选光斑边界;
将所述第一候选光斑边界加入第一候选光斑边界列表中。
5.根据权利要求4所述的方法,其特征在于,在将所述第一候选光斑边界加入第一候选光斑边界列表中之后,还包括:
构建与所述目标光斑提取列表的各项光斑对应的光斑连接框;
比较所述第一候选光斑边界列表中的光斑和所述光斑连接框的距离值,得到第一距离值;
若所述第一距离值低于预设阈值,将所述第一候选光斑边界列表中的光斑加入所述目标光斑提取列表。
6.根据权利要求2所述的方法,其特征在于,还包括:
确定所述多个距离信息中在所述第二预设方向上数值最小所对应的两个光斑,得到第二光斑集合,其中,所述第二光斑集合光斑中的两个光斑在所述瞳孔中心的第三侧面,且以所述瞳孔中心为中心,相对于所述第三侧面的另一侧面为第四侧面;
若所述第二光斑集合的目标光斑未在所述第一光斑集合中,将所述目标光斑加入所述目标光斑提取列表。
7.根据权利要求6所述的方法,其特征在于,每个光斑对应有X坐标和Y坐标,在得到所述第二光斑集合后,所述方法还包括:
选取所述第二光斑集合中的目标光斑,得到第三目标光斑;
获取所述第三目标光斑在所述第二预设方向的Y坐标,得到第二目标坐标;
根据所述第二目标坐标,确定所述第二预设方向的边界,得到第二目标边界。
8.根据权利要求7所述的方法,其特征在于,在得到所述第二目标边界之后,所述方法还包括:
若未在所述第二光斑集合的剩余光斑不是同在第四侧面,输出光斑提取结果,其中,所述光斑提取结果中包括:所述第二光斑集合的光斑和未在所述第二光斑集合的剩余光斑中距离所述瞳孔中心最近的光斑;
若未在所述第二光斑集合的剩余光斑是同在所述第四侧面,选取所述第二光斑集合中在所述第二预设方向距离所述第二目标边界最近的光斑,得到第四目标光斑;
选取所述第四目标光斑在所述第二预设方向的Y坐标,得到第二候选光斑坐标;
根据所述第二候选光斑坐标,确定第二候选光斑边界;
将所述第二候选光斑边界加入第二候选光斑边界列表中。
9.根据权利要求8所述的方法,其特征在于,在将所述第二候选光斑边界加入第二候选光斑边界列表之后,还包括:
构建与所述目标光斑提取列表的各项光斑对应的光斑连接框;
比较所述第二候选光斑边界列表中的光斑和所述光斑连接框的距离值,得到第二距离值;
若所述第二距离值低于预设阈值,将所述第二候选光斑边界列表中的光斑加入所述目标光斑提取列表。
10.根据权利要求9所述的方法,其特征在于,在得到所述目标光斑提取列表后,还包括:
判断所述目标光斑提取列表的光斑所对应的矩形范围比值是否为预设比值,其中,所述矩形范围比值为所述目标光斑提取列表的光斑连接所形成的矩形对应的范围比值;
若判断出所述目标光斑提取列表的光斑的矩形范围比值不是预设比值,切割所述光斑,以将所述光斑的矩形范围比值达到所述预设比值;
确定所述目标光斑提取列表中的每个光斑中心坐标,得到多个光斑中心坐标;
根据所述多个光斑中心坐标,获取每个所述光斑中心与所述瞳孔中心的距离参数,得到多个光斑中心距离值;
输出所述多个光斑中心距离值中数值最小所对应的光斑的中心坐标。
CN201810354501.8A 2018-04-19 2018-04-19 光斑提取方法 Active CN108898572B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201810354501.8A CN108898572B (zh) 2018-04-19 2018-04-19 光斑提取方法
TW108109587A TWI701940B (zh) 2018-04-19 2019-03-20 光斑提取方法
PCT/CN2019/083496 WO2019201337A1 (zh) 2018-04-19 2019-04-19 光斑提取方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810354501.8A CN108898572B (zh) 2018-04-19 2018-04-19 光斑提取方法

Publications (2)

Publication Number Publication Date
CN108898572A CN108898572A (zh) 2018-11-27
CN108898572B true CN108898572B (zh) 2020-11-13

Family

ID=64342318

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810354501.8A Active CN108898572B (zh) 2018-04-19 2018-04-19 光斑提取方法

Country Status (3)

Country Link
CN (1) CN108898572B (zh)
TW (1) TWI701940B (zh)
WO (1) WO2019201337A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108898572B (zh) * 2018-04-19 2020-11-13 北京七鑫易维信息技术有限公司 光斑提取方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013106645A (ja) * 2011-11-17 2013-06-06 Toyota Central R&D Labs Inc 視線計測装置及びプログラム
CN104809424A (zh) * 2014-01-23 2015-07-29 北京七鑫易维信息技术有限公司 一种基于虹膜特征实现视线追踪的方法
CN105094300A (zh) * 2014-05-16 2015-11-25 北京七鑫易维信息技术有限公司 一种基于标准化眼睛图像的视线追踪系统及方法
CN106778641A (zh) * 2016-12-23 2017-05-31 北京七鑫易维信息技术有限公司 视线估计方法及装置
CN107506705A (zh) * 2017-08-11 2017-12-22 西安工业大学 一种瞳孔‑普尔钦斑视线跟踪与注视提取方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI432172B (zh) * 2008-10-27 2014-04-01 Utechzone Co Ltd Pupil location method, pupil positioning system and storage media
CN102520796B (zh) * 2011-12-08 2014-10-08 华南理工大学 一种基于逐步回归分析映射模型的视线跟踪方法
CN102930252B (zh) * 2012-10-26 2016-05-11 广东百泰科技有限公司 一种基于神经网络头部运动补偿的视线跟踪方法
CN104739367B (zh) * 2015-03-14 2016-07-06 中国科学院苏州生物医学工程技术研究所 一种双目瞳孔对光综合检测系统
JP6764728B2 (ja) * 2016-08-26 2020-10-07 株式会社トプコン 眼科装置、及び眼科装置のアライメント方法
CN107831900B (zh) * 2017-11-22 2019-12-10 中国地质大学(武汉) 一种眼控鼠标的人机交互方法及系统
CN108898572B (zh) * 2018-04-19 2020-11-13 北京七鑫易维信息技术有限公司 光斑提取方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013106645A (ja) * 2011-11-17 2013-06-06 Toyota Central R&D Labs Inc 視線計測装置及びプログラム
CN104809424A (zh) * 2014-01-23 2015-07-29 北京七鑫易维信息技术有限公司 一种基于虹膜特征实现视线追踪的方法
CN105094300A (zh) * 2014-05-16 2015-11-25 北京七鑫易维信息技术有限公司 一种基于标准化眼睛图像的视线追踪系统及方法
CN106778641A (zh) * 2016-12-23 2017-05-31 北京七鑫易维信息技术有限公司 视线估计方法及装置
CN107506705A (zh) * 2017-08-11 2017-12-22 西安工业大学 一种瞳孔‑普尔钦斑视线跟踪与注视提取方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
《基于眼角精确定位的视线估计》;田书贞;《中国优秀硕士学位论文全文数据库 信息科技辑》;20150515(第05期);I138-1180 *

Also Published As

Publication number Publication date
WO2019201337A1 (zh) 2019-10-24
TW201944769A (zh) 2019-11-16
TWI701940B (zh) 2020-08-11
CN108898572A (zh) 2018-11-27

Similar Documents

Publication Publication Date Title
US9275277B2 (en) Using a combination of 2D and 3D image data to determine hand features information
EP3660703A1 (en) Method, apparatus, and system for identifying device, storage medium, processor, and terminal
CN108848367B (zh) 一种图像处理的方法、装置及移动终端
US10212408B1 (en) Depth-map augmentation techniques
CN104952027A (zh) 一种包含人脸信息的图片剪裁方法及装置
CN108711161A (zh) 一种图像分割方法、图像分割装置及电子设备
CN103679788B (zh) 一种移动终端中3d图像的生成方法和装置
CN103493095A (zh) 轮胎表面的数字图像的分析和非测量点的处理
CN108038491B (zh) 一种图像分类方法及装置
CN105117249B (zh) 一种android终端添加桌面插件的方法及装置
CN111050027B (zh) 镜头畸变补偿方法、装置、设备和存储介质
CN108898572B (zh) 光斑提取方法
CN107291238B (zh) 一种数据处理方法与装置
US10237530B1 (en) Depth-map augmentation techniques
CN110110829A (zh) 一种二维码处理方法及装置
CN112817447B (zh) 一种ar内容显示方法及系统
CN107948392B (zh) 终端及显示故障处理方法
CN113055579B (zh) 图像处理方法、装置、电子设备及可读存储介质
CN106534485A (zh) 群组头像的设置方法及装置
CN117372475A (zh) 眼球追踪方法和电子设备
CN109901716B (zh) 视线点预测模型建立方法、装置及视线点预测方法
CN107767421B (zh) 视线追踪设备中光斑光源匹配方法和装置
CN108388395B (zh) 图像裁剪方法、装置及终端
CN106657976B (zh) 一种可视范围延伸方法、装置及虚拟现实眼镜
CN108805883A (zh) 一种图像分割方法、图像分割装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant