发明内容
鉴于上述问题,提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的判断头戴式智能设备操作有效性的装置和方法。
为了实现该目的,本发明采用如下技术方案:
根据本发明的一个方面,提供了一种判断头戴式智能设备操作有效性的装置,该装置包括:动作感应模块,用于感应人眼的动作;特征信息获取模块,用于获取人体头部或者面部的至少一个部位的图像信息;动作有效性判断模块,用于根据图像信息与预先存储的标准图像信息的对比结果判断动作的有效性,其中,动作感应模块,特征信息获取模块均设置在头戴式智能设备上。
其中,特征信息获取模块获取的图像信息包括预定时间内的、或设定的动作间隔之间的图像信息。
在一个实施例中,动作有效性判断模块在当实时的图像信息与预先存储的标准图像信息一致时,则判定为动作有效以便执行该动作对应的操作。
此外,动作有效性判断模块至少包括一图像传感器,的图像传感器获取人体头部面部的至少一部位的图像信息。
在一个实施例中,动作有效性判断模块包括信号分析处理模块和比较模块,信号分析处理模块分析的图像信息的像素、和/或大小、和/或特征点位置,并将计算实时图像信息与预先存储的标准图像信息的像素、和/或大小、和/或特征点位置的平均值之间的差值,比较模块将该差值与预设的允许变化差值进行比较,在允许的变化差值之内认定为动作有效。
并且,特征信息获取模块包括一图像传感器,信号调理电路,信号调理电路与信号分析处理模块相连接,图像传感器的输出端和信号调理电路的输入端连接,信号调理电路用于将图像传感器所获取的图像信号转换为信号分析处理模块可识别的电信号。
可选地,动作有效性判断模块可以设置在头戴式智能设备上。
可选地,动作有效性判断模块可以设置在独立于头戴式智能设备之外的处理单元上,并与头戴式智能设备通讯连接。
根据本发明的另一方面,提供了一种判断头戴式智能设备操作有效性的方法,该方法包括:
感应人眼的动作信息,动作信息与头戴式智能设备的操纵指令以预定规则相对应,用于操纵头戴式智能设备;
获取人体头部或者面部的至少一个部位的图像信息;
根据图像信息与预先存储的标准图像信息的对比结果判断动作的有效性。
其中,图像信息包括预定时间内的、或设定的动作间隔之间的图像信息。
在一个实施例中,根据图像信息与预先存储的标准图像信息的对比结果判断动作的有效性包括:
动作有效性判断模块在当实时的图像信息与预先存储的标准图像信息一致时,则判定为动作有效以便执行该动作对应的操作。
在另一实施例中,分析的图像信息的像素、和/或大小、和/或特征点位置,并将计算实时图像信息与预先存储的标准图像信息的像素、和/或大小、和/或特征点位置的平均值之间的差值;
将该差值与预设的允许变化差值进行比较,在允许的变化差值之内认定为动作有效。
采用本发明所述的技术方案后,带来以下有益效果:
根据本发明的技术方案,可以实现通过对头戴式智能设备的使用者头部或者面部某至少一个特征部位的图像信息的实时监测,并根据实时监测到的图像信息与预先存储的标准图像信息的比较结果,判定该头戴式智能设备的操作有效性,从而很大程度上保证了操作安全。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂,下面结合附图对本发明的具体实施方式作进一步详细的描述。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
根据本发明的实施例,提供了一种判断头戴式智能设备操作有效性的装置。
如图1所示,该头戴式智能设备包括动作感应模块110,用于感应人眼的动作;特征信息获取模块120,用于获取人体头部或者面部的至少一特征部位的图像信息;动作有效性判断模块130,用于根据图像信息与预先存储的标准图像信息的对比结果判定动作的有效性,其中,动作感应模块110,特征信息获取模块120均设置在头戴式智能设备上。
其中,特征信息获取模块120获取人体头部或面部的至少一特征部位的图像信息,该图像信息包括预设时间段内的、或设定的动作间隔之间的图像信息。
并且,动作有效性判断模块130根据获取的该图像信息与预先存储的标准图像信息的对比结果判定该头戴式智能设备的操作有效性。
此外,在其他实施例中,特征信息获取模块120所获取的图像信息的时间段并不限于上述的一定时间或设定的动作间隔之间的连续的图像信息,也可以是该头戴式智能设备进行某一操作过程的时间段内,也可以是在电量等硬件环境允许的全部时间内,并无特殊限制。
此外,在具体实施例中,特征信息获取模块120所获取的图像信息,也可以包括其他图像信息,并不限于上述的人体头部或者面部的至少一特征部位的图像信息。
例如以下具体实施例,图2a和图2b所示判断头戴式智能设备操作有效性的装置100,其中,图2a为该头戴式智能设备的结构框图,图2b为该头戴式智能设备的结构示意图,该头戴式智能设备包括佩戴支撑装置10、图像传感器20、动作传感器30、以及动作有效性判断模块130,其中,图像传感器20和动作传感器30均与动作有效性判断模块130相连接,并设置于佩戴支撑装置10上,并且,图像传感器20用于获取该头戴式智能设备当前使用者面部指定部位的图像信息,并将该图像信息转换成电信号,传递给动作有效性判断模块130,动作传感器30用于感应人眼部动作,并将感应到的动作信息转换成电信号,传递给动作有效性判断模块130,动作有效性判断模块130接收表示实时接收到的图像信息的电信号,并将该电信号与预先存储的表示标准图像信息的电信号进行比较,在两者相一致的情况下,则判断动作传感器30当前所感应到的人眼动作是有效的,并允许执行该动作所表示的指令信息,否则,认为动作传感器30所检测到的人眼动作无效,将其忽略。
需要说明的是,在动作感应模块110感应到人眼动作的情况下,特征信息获取模块120即开始获取图像信息,直到动作感应模块110感应不到人眼动作或者接收到操作结束指令时,特征信息获取模块120停止感应图像信息,在其他实施例中,特征信息获取模块120感应图像信息的时间也可以是某一操作进行的时间范围内,也可以是电量等硬件环境允许的全部时间内,总之,只要动作感应模块110感应到人眼动作,特征信息获取模块120就应该伴随着图像信息的检测,从而实现对某一操作进行中动作有效性的监测。
需要说明的是,本文中所示出的附图均为示意图,不代表真实产品,在实际应用中,可以根据需要设置产品的形状、尺寸、以及各个模块的位置。
佩戴支撑装置10佩戴于使用者身上,其将图像传感器20固定于使用者的检测部位,以持续检测该使用者某至少一特征部位的至少两次人眼动作之间的、或设定的动作间隔之间的图像信息,在本实施例中,佩戴支撑装置10佩戴于被检测者的头部,其为眼镜式结构,图像传感器20设置在该眼镜的支架前端部,当然,在其他实施例中,该头戴式智能设备也可以是耳机、帽子、头套等,只要能使图像传感器20与使用者的检测部位在位置上保持相对固定即可,此外,根据需要,该头戴式智能设备还可以包括显示屏,在具有显示屏的情况下,图像传感器20将检测到的图像信息传送至显示屏,并通过显示屏显示该图像信息。
此外,在另一具体实施例中,如图3所示,判断头戴式智能设备操作有效性的装置的结构框图,其中,特征信息获取模块120包括图像感应模块121,光电转换模块122、信号调制模块123,并且,图像感应模块121、光电转换模块122、信号调制模块123依次顺序电连接。
其中,图像感应模块121用于感应目标位置的图像信号,在本实施例中,图像感应模块121可以是摄像机。
图像感应模块121将感应到的图像信号传送至光电转换模块122,图像信号经由光电转换模块122转换为电信号并传送至信号调制模块123,信号调制模块123对电信号进行放大和滤波处理,传送至动作有效性判断模块130。
动作有效性判断模块130包括信号分析处理模块131和比较模块132,信号分析处理模块131分析接收到的图像信息的像素、和/或大小、和/或特征点位置,并将计算实时图像信息与预先存储的标准图像信息的像素、和/或大小、和/或特征点位置的平均值之间的差值,比较模块132将该差值与预设的允许变化差值进行比较,在允许的变化差值之内认定为动作有效,允许执行当前动作感应模块110所感应到的人眼动作所对应的操作指令,反之,如果该差值在允许的变化差值之外则认定为当前动作感应模块110所感应到的人眼动作信息无效,忽略该动作。
此外,在本实施例中,比较模块132进一步包括可调电阻(未示出)和调节件(未示出),其中,可调电阻用于调节临界值电压信号,本实施例中,通过调节件来改变可调电阻的电阻值,以调节临界值电压信号。
此外,比较模块132还包括存储体温信息的存储单元(图未示出),用于存储预设的图像信息允许变化差值。
此外,比较模块132进一步包括信息采集单元(未示出),该信息采集单元连接于存储单元,用于在首次使用该头戴式设备,或者,该头戴式智能设备要更换使用者的情况下,对用户身份信息进行采集,在该信息采集单元接收到信息采集指令的情况下,需要一定时间(例如:3分钟)的用户身份信息的读取与保存过程,在这段时间内,该信息采集单元模块连续读取当前使用者面部某指定部位的图像信息,并记录该图像信息在该时间段内的整体变化趋势,并根据该变化趋势确定图像信息的允许变化差值范围,并将表示该允许变化差值范围的电信号存储于存储单元中。
此外,如图4a和图4b所示为又一判断头戴式智能设备操作有效性的装置200,进一步包括报警模块40。报警模块40和动作有效性判断模块130相连接。在本实施例中,报警模块40通过通信接口(图未标示)和动作有效性判断模块130相连接,并且,动作有效性判断模块包括比较模块(未示出)。动作有效性判断模块130通过图像信号与临界值信号的比较结果来控制报警模块40的启动或停止。具体地,比较模块将实时监测到的图像信息与预先存储的标准图像信息之间的差值与允许的变化差值范围进行比较,当实时监测到的图像信息与预先存储的标准图像信息之间的差值超出允许的变化差值范围的最高临界值时,输出的比较结果为报警信号,该报警信号传送至报警模块40,并相应地控制报警模块40的启动或停止。
此外,在其他实施例中,也可以将实时接收到的图像像素、和/或大小、和/或特征点位置坐标与预设的图像像素、和/或大小、和/或特征点位置坐标范围进行比较,在实时接收到的图像像素、和/或大小、和/或特征点位置坐标超出该预设范围的情况下,则认定当前接收到的动作信息无效。
可以理解的是,报警模块40可以是声音报警器(如蜂鸣器)或光学报警器(如频闪灯),也可以是声音报警器和光学报警器的组合。同时,报警模块40既可以设置在头戴式智能设备上,也可以设置在独立于该头戴式智能设备的处理单元上,如果报警模块40被设置在独立于该头戴式智能设备之外的处理单元上,则报警模块40可以通过蓝牙、wifi等无线设备实现与动作有效性判断模块130通讯连接。
此外,在再一具体实施例中,如图5所示,判断头戴式智能设备操作有效性的装置,特征信息获取模块120包括一图像传感器124和信号调理电路125,图像传感器124的输出端与信号调理电路125的输入端相连,动作有效性判断模块130包括信号分析处理模块131和比较模块132,信号调理电路125与信号分析处理模块131相连接,信号调理电路125用于将图像传感器121所获取的图像信号转换为信号分析处理模块131可识别的电信号。
信号分析处理模块131分析接收到的图像信息的像素、和/或大小、和/或特征点位置,并将计算实时图像信息与预先存储的标准图像信息的像素、和/或大小、和/或特征点位置的平均值之间的差值,比较模块132将该差值与预设的允许变化差值进行比较,在允许的变化差值之内认定为动作有效,允许执行该动作,反之,如果该差值在允许的变化差值之外,则认定为动作无效,忽略动作感应模块110感应到的动作信息。
具体地,信号调理电路125用于把模拟信号变换为用于数据采集、控制过程、执行计算显示读出或其他目的的数字信号。图像传感器124测量使用者的图像信息,但由于传感器信号不能直接转换为数字数据,这是因为传感器输出是相当小的电压、电流或电阻变化,因此,在变换为数字信号之前必须进行放大、缓冲或定标模拟信号等,也就是调理过程,使其适合于模/数转换器(ADC)的输入,然后,ADC对模拟信号进行数字化,并把数字信号送到MCU或其他数字器件,以便用于系统的数据处理。
此外,在以上任一实施例中,动作有效性判断模块130可以设置在该头戴式智能设备上,也可以设置在独立于该头戴式智能设备的处理单元上,如果动作有效性判断模块130设置在独立于该头戴式智能设备的处理单元上,则动作有效性判断模块130可以通过wifi、蓝牙等无线设备实现与该头戴式智能设备之间的通讯连接。
根据本发明的实施例,还提供了一种判断头戴式智能设备操作有效性的方法。如图6所示,该方法包括:
步骤S610,感应人眼的动作信息,动作信息与头戴式智能设备的操纵指令以预定规则相对应,用于操纵头戴式智能设备;
步骤S620,获取人体头部或者面部的至少一个部位的图像信息;
步骤S630,根据图像信息与预先存储的标准图像信息的对比结果判断动作的有效性。
其中,图像信息包括预定时间内的、或设定的动作间隔之间的图像信息。
在一个实施例中,根据图像信息与预先存储的标准图像信息的对比结果判断动作的有效性包括:
动作有效性判断模块在当实时的图像信息与预先存储的标准图像信息一致时,则判定为动作有效以便执行该动作对应的操作。
此外,在另一实施例中,该方法进一步包括:
分析的图像信息的像素、和/或大小、和/或特征点位置,并将计算实时图像信息与预先存储的标准图像信息的像素、和/或大小、和/或特征点位置的平均值之间的差值;
将差值与预设的允许变化差值进行比较,在允许的变化差值之内认定为动作有效。
此外,在具体实施例中,所获取的图像信息,也可以包括其他图像信息,并不限于上述的人体头部或者面部的至少一特征部位的图像信息。
可以理解,随着信息时代的发展,通过人的眼部动作信息等发送操纵指令来完成某些操作的技术已经越来越完善,在解放人双手的同时,也存在弊端,比如,在现有技术中,并没有一种方式可以对头戴式智能设备所接收的到的动作信息的有效性进行判断,如果执行了无效的动作信息、或者忽略了有效的动作信息,都会给用户造成不必要的麻烦或者损失,所以,通过以上方式,可以实现对头戴式智能设备的使用者的至少一特征部位的图像信息的实时监测,通过实时了解到图像信息与预先存储的标准图像信息的对比结果,可以实现对接收到的动作信息进行有效性判断,例如以下场景:
(场景一)例如,用户应用头戴式智能设备登陆某购物网站购买多个商品,并且,通过眨眼动作指令传递购买信息,在预定时间内,如果动作有效性判断模块所检测到的图像信息连续且与预先存储的标准图像信息一致,则判定此期间该设备所接收到的眨眼动作指令有效,用户可以在此期间买多个产品(假如次眨眼指令表示一次购买信息),如果动作有效性判断模块所检测到的图像信息不连续、或者与预先存储的标准图像信息不一致,则判断此后、直到重新接收到有效的操作指令之前所接收到的操作指令无效,不能应用该指令传递购买信息,从而使用户顺利地完成购买任务。
(场景二)用户使用头戴式智能设备观看视频或者查阅文件,用户通过眨眼、或者瞪眼等眼部动作控制该文件的打开、关闭、或者快进、快退、上下翻页等,此时,也可以通过上述的动作有效性判断方式来保证该文件查阅者的查阅动作是否有效,例如,在一预设时间内(可以是用户观看某段视频、或者查阅某个文件的时间),如果动作有效性判断模块所检测到的图像信息连续且与预先存储的标准图像信息一致,则判定此期间该设备所接收到的眨眼动作指令有效,用户可以在此期间连续地观看该视频或者查阅该文件,如果动作有效性判断模块所检测到的图像信息不连续、或者与预先存储的标准图像信息不一致,则判断此后、直到重新接收到有效的操作指令之前所接收到的操作指令无效,关闭当前正在播放的视频、或者文件。此外,上述的头戴式智能设备可以是眼镜、也可以是帽子、耳机、头套等等。
此外,在首次使用该头戴式设备,或者,该头戴式智能设备要更换使用者的情况下,需要对用户身份信息进行采集,该功能可以由特征信息获取模块实现,也可以新增信息采集模块,在该模块接收到信息采集指令的情况下,需要一定时间(例如:3分钟)的用户身份信息的读取与保存过程,在这段时间内,该模块连续读取当前使用者头部或者面部某至少一部位的图像信息,并记录图像信息在该时间段内的整体变化趋势,其中,图像信息可以包括:图像像素、和/或大小、和/或某特征点的位置,并根据上述信息中的至少之一以及在该时间段内的整体变化趋势确定标准图像信息、以及图像信息的波动范围,正常情况下,可能会出现图像信息在某一个、或者多个时间点出现剧烈变化,超出该波动范围,但是,只要该剧烈变化持续时间非常短,或者仅仅是一个时间点出现的,并且变化恢复后,该信息的整体变化趋势并没有发生改变,则仍然认为该情况满足动作有效性验证的。
此外,需要说明的是,在上述任一实施例中,人体面部特征获取模块所获取的图像信息可以是一次眼部动作之前、或者之后、或者包含该眼部动作在内的一段时间内的图像信息,也可以是两次或者多次眼部动作之间的时间段内的图像信息,总之,检测图像信息的目的是保证在该动作指令的过程中并没有更换使用者,所以,只要检测到使用者的眼部动作,便需要伴随着对图像信息的持续检测,检测图像信息的时间点、时间长度,并无过多限制。
此外,在上述任一实施例中,还可以继续增加省电装置,该装置用于在人体面部特征获取模块持续一定时间(比如:5分钟)内都检测不到预设范围内的图像信息,则可以默认为该头戴式智能设备离开人体,或者使用出现异常,自动进入休眠状态。
在此提供的算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与基于在此的示教一起使用。根据上面的描述,构造这类系统所要求的结构是显而易见的。此外,本发明也不针对任何特定编程语言。应当明白,可以利用各种编程语言实现在此描述的本发明的内容,并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
类似地,应当理解,为了精简本公开并帮助理解各个发明方面中的一个或多个,在上面对本发明的示例性实施例的描述中,本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说,如下面的权利要求书所反映的那样,发明方面在于少于前面公开的单个实施例的所有特征。因此,遵循具体实施方式的权利要求书由此明确地并入该具体实施方式,其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外,本领域的技术人员能够理解,尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征,但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如,在下面的权利要求书中,所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
本发明的各个部件实施例可以以硬件实现,或者以在一个或者多个处理器上运行的软件模块实现,或者以它们的组合实现。本领域的技术人员应当理解,可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的判断头戴式智能设备操作有效性的装置中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如,计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上,或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到,或者在载体信号上提供,或者以任何其他形式提供。
应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制,并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中,不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中,这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
根据本发明的技术方案,可以实现通过对头戴式智能设备的使用者头部或者面部某至少一个特征部位的图像信息的实时监测,并根据实时监测到的图像信息与预先存储的标准图像信息的比较结果,判定该头戴式智能设备的操作有效性。
以上,仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应该以权利要求的保护范围为准。