CN106774848B - 遥控设备及遥控系统 - Google Patents

遥控设备及遥控系统 Download PDF

Info

Publication number
CN106774848B
CN106774848B CN201611053371.1A CN201611053371A CN106774848B CN 106774848 B CN106774848 B CN 106774848B CN 201611053371 A CN201611053371 A CN 201611053371A CN 106774848 B CN106774848 B CN 106774848B
Authority
CN
China
Prior art keywords
equipment
component
remote control
user
controlled plant
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201611053371.1A
Other languages
English (en)
Other versions
CN106774848A (zh
Inventor
李友泽
杜育锋
杨瑞锋
范利涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BOE Technology Group Co Ltd
Beijing BOE Optoelectronics Technology Co Ltd
Original Assignee
BOE Technology Group Co Ltd
Beijing BOE Optoelectronics Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BOE Technology Group Co Ltd, Beijing BOE Optoelectronics Technology Co Ltd filed Critical BOE Technology Group Co Ltd
Priority to CN201611053371.1A priority Critical patent/CN106774848B/zh
Publication of CN106774848A publication Critical patent/CN106774848A/zh
Priority to US15/679,142 priority patent/US10274729B2/en
Application granted granted Critical
Publication of CN106774848B publication Critical patent/CN106774848B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B2027/0178Eyeglass type

Abstract

本发明公开一种遥控设备及遥控系统,属于电子技术领域。遥控设备包括:设备本体、处理组件、眼部信息采集组件和环境信息采集组件,处理组件、眼部信息采集组件和环境信息采集组件均设置在设备本体上,且眼部信息采集组件和环境信息采集组件分别与处理组件电连接;眼部信息采集组件用于采集用户的眼部信息;环境信息采集组件用于采集用户前方环境的环境信息;处理组件用于根据眼部信息和环境信息确定受控设备,并对受控设备进行控制。本发明解决了采用遥控器控制受控设备的操作过程复杂的问题,简化了控制受控设备的操作过程。本发明用于遥控。

Description

遥控设备及遥控系统
技术领域
本发明涉及电子技术领域,特别涉及一种遥控设备及遥控系统。
背景技术
随着电子技术的发展,基于电子技术的电子设备在人们的生活中日益普及。电子设备通常都配备有遥控器,用户可以通过遥控器对电子设备进行控制。
相关技术中,遥控器包括遥控器本体和遥控按键,遥控器本体通常为能够手持的结构,遥控按键设置在遥控器本体上,在采用遥控器对电子设备进行控制时,用户可以手握遥控器本体,并将遥控器对准需要控制的电子设备,然后按压相应的遥控按键使遥控器发出相应的遥控信号对电子设备进行控制。比如,电子设备可以为电视机A,在电视机A处于关闭状态时,用户可以手握遥控器本体,将遥控器对准电视机A,然后按压遥控器上的开关按键使遥控器发出开启信号来开启电视机A;在电视机A处于开启状态时,用户可以手握遥控器本体,并将遥控器对准电视机A,然后按压遥控器上的音量调节按键使遥控器发出音量调节信号来调节电视机A的播放音量。
在实现本发明的过程中,发明人发现相关技术至少存在以下问题:
采用相关技术中的遥控器对电子设备进行控制时,需要用户手握遥控器本体,且需要将遥控器对准电子设备并按压遥控按键,因此,采用相关技术中的遥控器控制电子设备的操作过程复杂。
发明内容
为了解决采用遥控器控制电子设备的操作过程复杂的问题,本发明提供一种遥控设备及遥控系统。所述技术方案如下:
第一方面,提供一种遥控设备,所述遥控设备包括:
设备本体、处理组件、眼部信息采集组件和环境信息采集组件,所述处理组件、所述眼部信息采集组件和所述环境信息采集组件均设置在所述设备本体上,且所述眼部信息采集组件和所述环境信息采集组件分别与所述处理组件电连接;
所述眼部信息采集组件用于采集用户的眼部信息;
所述环境信息采集组件用于采集用户前方环境的环境信息;
所述处理组件用于根据所述眼部信息和所述环境信息确定受控设备,并对所述受控设备进行控制。
可选地,所述设备本体为可穿戴结构,所述眼部信息采集组件设置在所述设备本体的内侧,所述环境信息采集组件设置在所述设备本体的外侧,在所述设备本体被用户穿戴时,所述眼部信息采集组件朝向用户眼部,所述环境信息采集组件朝向用户前方环境。
可选地,所述眼部信息采集组件为眼部图像采集组件,所述眼部信息为眼部图像,所述环境信息采集组件为距离采集组件,
所述处理组件用于根据所述眼部图像确定眼球方位,根据所述眼球方位确定视线方向,将位于所述视线方向上的设备确定为被注视设备,得到至少一个被注视设备,其中,所述眼球方位采用当前瞳孔位置相对于预设的基准瞳孔位置的偏移值来表征;
所述处理组件还用于根据所述眼部图像确定瞳孔尺寸,根据所述瞳孔尺寸确定注视距离;
所述距离采集组件用于采集所述至少一个被注视设备中的每个被注视设备与所述遥控设备之间的测量距离;
所述处理组件还用于根据所述至少一个被注视设备中的每个被注视设备与所述遥控设备之间的测量距离和所述注视距离,在所述至少一个被注视设备中确定所述受控设备。
可选地,所述眼部信息采集组件为眼部图像采集组件,所述眼部信息为眼部图像,所述环境信息采集组件为环境图像采集组件,
所述处理组件用于根据所述眼部图像确定眼球方位,根据所述眼球方位确定视线方向,将位于所述视线方向上的设备确定为被注视设备,得到至少一个被注视设备,其中,所述眼球方位采用当前瞳孔位置相对于预设的基准瞳孔位置的偏移值来表征;
所述处理组件还用于根据所述眼部图像确定瞳孔尺寸,根据所述瞳孔尺寸确定注视距离;
所述环境图像采集组件用于采集所述用户前方环境的环境图像,所述环境图像中包括所述至少一个被注视设备的图像;
所述处理组件还用于根据所述环境图像,确定所述至少一个被注视设备中的每个被注视设备与所述遥控设备之间的测量距离;
所述处理组件还用于根据所述至少一个被注视设备中的每个被注视设备与所述遥控设备之间的测量距离和所述注视距离,在所述至少一个被注视设备中确定所述受控设备。
可选地,所述处理组件还用于在所述至少一个被注视设备中,选择测量距离与所述注视距离最接近的设备作为所述受控设备。
可选地,所述遥控设备还包括:验证信息采集组件,所述验证信息采集组件设置在所述设备本体上,且与所述处理组件电连接;
所述验证信息采集组件用于采集用户的身份验证信息,所述身份验证信息用于验证所述用户对所述受控设备的控制权限;
所述处理组件用于根据所述身份验证信息对所述用户进行身份验证,并在身份验证成功后,允许对所述受控设备进行控制。
可选地,所述遥控设备还包括:验证信息采集组件和通信组件,所述验证信息采集组件和所述通信组件均设置在所述设备本体上,且所述通信组件分别与所述验证信息采集组件和所述处理组件电连接;
所述验证信息采集组件用于采集用户的身份验证信息,并通过所述通信组件向所述受控设备发送所述身份验证信息,使所述受控设备根据所述身份验证信息对所述用户进行身份验证,所述身份验证信息用于验证所述用户对所述受控设备的控制权限;
所述处理组件用于在所述受控设备对所述用户的身份验证成功后,允许对所述受控设备进行控制。
可选地,所述遥控设备还包括:验证信息采集组件和通信组件,所述验证信息采集组件和通信组件均设置在所述设备本体上,且所述通信组件分别与所述验证信息采集组件和所述处理组件电连接;
所述验证信息采集组件用于采集用户的身份验证信息,并通过所述通信组件向验证设备发送所述身份验证信息,使所述验证设备根据所述身份验证信息对所述用户进行身份验证,所述身份验证信息用于验证所述用户对所述受控设备的控制权限;
所述处理组件用于在所述验证设备对所述用户的身份验证成功后,允许对所述受控设备进行控制。
可选地,所述遥控设备还包括:呈现组件,所述呈现组件设置在所述设备本体上,且与所述处理组件电连接;
所述呈现组件用于呈现所述受控设备的信息。
第二方面,提供一种遥控系统,所述遥控系统包括:受控设备和第一方面或第一方面的任一可选方式所述的遥控设备。
第三方面,提供一种遥控方法,用于遥控设备,所述方法包括:
采集用户的眼部信息;
采集用户前方环境的环境信息;
根据所述眼部信息和所述环境信息确定受控设备;
对所述受控设备进行控制。
可选地,所述眼部信息为眼部图像,所述环境信息为至少一个被注视设备中的每个被注视设备与所述遥控设备之间的测量距离,所述根据所述眼部信息和所述环境信息确定受控设备,包括:
根据所述眼部图像确定眼球方位,所述眼球方位采用当前瞳孔位置相对于预设的基准瞳孔位置的偏移值来表征;
根据所述眼球方位确定视线方向;
将位于所述视线方向上的设备确定为被注视设备,得到所述至少一个被注视设备;
根据所述眼部图像确定瞳孔尺寸;
根据所述瞳孔尺寸确定注视距离;
根据所述至少一个被注视设备中的每个被注视设备与所述遥控设备之间的测量距离和所述注视距离,在所述至少一个被注视设备中确定所述受控设备。
可选地,所述眼部信息为眼部图像,所述环境信息为环境图像,所述环境图像中包括至少一个被注视设备的图像,所述根据所述眼部信息和所述环境信息确定受控设备,包括:
根据所述眼部图像确定眼球方位,所述眼球方位采用当前瞳孔位置相对于预设的基准瞳孔位置的偏移值来表征;
根据所述眼球方位确定视线方向;
将位于所述视线方向上的设备确定为被注视设备,得到所述至少一个被注视设备;
根据所述眼部图像确定瞳孔尺寸;
根据所述瞳孔尺寸确定注视距离;
根据所述环境图像,确定所述至少一个被注视设备中的每个被注视设备与所述遥控设备之间的测量距离;
根据所述至少一个被注视设备中的每个被注视设备与所述遥控设备之间的测量距离和所述注视距离,在所述至少一个被注视设备中确定所述受控设备。
可选地,所述根据所述至少一个被注视设备中的每个被注视设备与所述遥控设备之间的测量距离和所述注视距离,在所述至少一个被注视设备中确定所述受控设备,包括:
在所述至少一个被注视设备中,选择测量距离与所述注视距离最接近的设备作为所述受控设备。
可选地,在所述对所述受控设备进行控制之前,所述方法还包括:
采集用户的身份验证信息,所述身份验证信息用于验证所述用户对所述受控设备的控制权限;
根据所述身份验证信息对所述用户进行身份验证;
所述对所述受控设备进行控制,包括:
在身份验证成功后,允许对所述受控设备进行控制。
可选地,在所述对所述受控设备进行控制之前,所述方法还包括:
采集用户的身份验证信息,所述身份验证信息用于验证所述用户对所述受控设备的控制权限;
向所述受控设备发送所述身份验证信息,使所述受控设备根据所述身份验证信息对所述用户进行身份验证;
所述对所述受控设备进行控制,包括:
在所述受控设备对所述用户的身份验证成功后,允许对所述受控设备进行控制。
可选地,在所述对所述受控设备进行控制之前,所述方法还包括:
采集用户的身份验证信息,所述身份验证信息用于验证所述用户对所述受控设备的控制权限;
向验证设备发送所述身份验证信息,使所述验证设备根据所述身份验证信息对所述用户进行身份验证;
所述对所述受控设备进行控制,包括:
在所述验证设备对所述用户的身份验证成功后,允许对所述受控设备进行控制。
可选地,在根据所述眼部信息和所述环境信息确定受控设备之后,所述方法还包括:
呈现所述受控设备的信息。
第四方面,提供一种遥控装置,用于遥控设备,所述装置包括:
第一采集模块,用于采集用户的眼部信息;
第二采集模块,用于采集用户前方环境的环境信息;
确定模块,用于根据所述眼部信息和所述环境信息确定受控设备;
控制模块,用于对所述受控设备进行控制。
可选地,所述眼部信息为眼部图像,所述环境信息为至少一个被注视设备中的每个被注视设备与所述遥控设备之间的测量距离,所述确定模块,用于:
根据所述眼部图像确定眼球方位,所述眼球方位采用当前瞳孔位置相对于预设的基准瞳孔位置的偏移值来表征;
根据所述眼球方位确定视线方向;
将位于所述视线方向上的设备确定为被注视设备,得到所述至少一个被注视设备;
根据所述眼部图像确定瞳孔尺寸;
根据所述瞳孔尺寸确定注视距离;
根据所述至少一个被注视设备中的每个被注视设备与所述遥控设备之间的测量距离和所述注视距离,在所述至少一个被注视设备中确定所述受控设备。
可选地,所述眼部信息为眼部图像,所述环境信息为环境图像,所述环境图像中包括至少一个被注视设备的图像,所述确定模块,用于:
根据所述眼部图像确定眼球方位,所述眼球方位采用当前瞳孔位置相对于预设的基准瞳孔位置的偏移值来表征;
根据所述眼球方位确定视线方向;
将位于所述视线方向上的设备确定为被注视设备,得到所述至少一个被注视设备;
根据所述眼部图像确定瞳孔尺寸;
根据所述瞳孔尺寸确定注视距离;
根据所述环境图像,确定所述至少一个被注视设备中的每个被注视设备与所述遥控设备之间的测量距离;
根据所述至少一个被注视设备中的每个被注视设备与所述遥控设备之间的测量距离和所述注视距离,在所述至少一个被注视设备中确定所述受控设备。
可选地,所述确定模块,用于在所述至少一个被注视设备中,选择测量距离与所述注视距离最接近的设备作为所述受控设备。
可选地,所述装置还包括:
第三采集模块,用于采集用户的身份验证信息,所述身份验证信息用于验证所述用户对所述受控设备的控制权限;
第一验证模块,用于根据所述身份验证信息对所述用户进行身份验证;
所述控制模块,用于在身份验证成功后,允许对所述受控设备进行控制。
可选地,所述装置还包括:
第四采集模块,用于采集用户的身份验证信息,所述身份验证信息用于验证所述用户对所述受控设备的控制权限;
第一发送模块,用于向所述受控设备发送所述身份验证信息,使所述受控设备根据所述身份验证信息对所述用户进行身份验证;
所述控制模块,用于在所述受控设备对所述用户的身份验证成功后,允许对所述受控设备进行控制。
可选地,所述装置还包括:
第五采集模块,用于采集用户的身份验证信息,所述身份验证信息用于验证所述用户对所述受控设备的控制权限;
第二发送模块,用于向验证设备发送所述身份验证信息,使所述验证设备根据所述身份验证信息对所述用户进行身份验证;
所述控制模块,用于在所述验证设备对所述用户的身份验证成功后,允许对所述受控设备进行控制。
可选地,所述装置还包括:呈现模块,用于呈现所述受控设备的信息。
本发明提供的技术方案带来的有益效果是:
本发明提供的遥控设备及遥控系统,由于遥控设备能够根据用户的眼部信息和用户前方环境的环境信息确定受控设备,并对受控设备进行控制,因此,无需用户手动操作遥控设备就可以使遥控设备对受控设备进行控制,解决了采用遥控器控制受控设备的操作过程复杂的问题,简化了控制受控设备的操作过程。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性的,并不能限制本发明。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1-1是本发明实施例提供的一种遥控设备的结构示意图;
图1-2是图1-1所示实施例提供的遥控设备控制受控设备的示意图;
图2是本发明实施例提供的一种遥控系统的结构示意图;
图3-1是本发明实施例提供的一种遥控方法的方法流程图;
图3-2是图3-1所示实施例提供的一种确定受控设备的方法流程图;
图3-3是图3-1所示实施例提供的另一种确定受控设备的方法流程图;
图3-4是图3-1所示实施例提供的一种对用户进行身份验证的方法流程图;
图3-5是图3-1所示实施例提供的一种对用户进行身份验证的方法流程图;
图3-6是图3-1所示实施例提供的一种对用户进行身份验证的方法流程图;
图4-1是本发明实施例提供的一种遥控装置的框图;
图4-2是本发明实施例提供的另一种遥控装置的框图;
图4-3是本发明实施例提供的再一种遥控装置的框图;
图4-4是本发明实施例提供的又一种遥控装置的框图。
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作进一步地详细描述,显然,所描述的实施例仅仅是本发明一部份实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
请参考图1-1,其示出了本发明实施例提供的一种遥控设备10的结构示意图,参见图1-1,该遥控设备10包括:设备本体11、处理组件12、眼部信息采集组件13和环境信息采集组件14。
处理组件12、眼部信息采集组件13和环境信息采集组件14均设置在设备本体11上,且眼部信息采集组件13和环境信息采集组件14分别与处理组件12电连接(图1-1中未示出);眼部信息采集组件13用于采集用户的眼部信息;环境信息采集组件14用于采集用户前方环境的环境信息;处理组件12用于根据眼部信息和环境信息确定受控设备(图1-1中未示出),并对受控设备进行控制。
综上所述,本发明实施例提供的遥控设备,由于遥控设备能够根据用户的眼部信息和用户前方环境的环境信息确定受控设备,并对受控设备进行控制,因此无需用户手动操作遥控设备就可以使遥控设备对受控设备进行控制,解决了采用遥控器控制受控设备的操作过程复杂的问题,简化了控制受控设备的操作过程。
进一步地,在本发明实施例中,设备本体10为可穿戴结构,且该设备本体10优选为眼镜、头盔等能够穿戴在用户头部的可穿戴结构,眼部信息采集组件13设置在设备本体11的内侧,环境信息采集组件14设置在设备本体11的外侧,在设备本体11被用户穿戴时,该眼部信息采集组件13朝向用户眼部,该环境信息采集组件14朝向用户前方环境。
进一步地,在本发明实施例中,眼部信息采集组件13可以为眼部图像采集组件,眼部信息可以为眼部图像,环境信息采集组件14可以为距离采集组件或环境图像采集组件。其中,眼部图像采集组件具体可以为摄像头,其优选为广角摄像头,广角摄像头的视角范围较大,当该广角摄像头与用户眼部的距离较小时,也能有效采集用户的眼部图像。其中,当环境信息采集组件14为距离采集组件时,该环境信息采集组件14具体可以为红外线测距传感器、微波测距传感器、超声波测距传感器或激光测距传感器等;当环境信息采集组件14为环境图像采集组件时,该环境信息采集组件14具体可以为摄像头,以下以眼部信息采集组件13为眼部图像采集组件,以环境信息采集组件14分别为距离采集组件和环境图像采集组件为例来进行说明。
第一方面,眼部信息采集组件13为眼部图像采集组件,环境信息采集组件14为距离采集组件。
眼部图像采集组件用于采集用户的眼部图像。比如,眼部图像采集组件通过拍摄的方式采集用户的眼部图像。
处理组件13用于根据眼部图像确定眼球方位,根据眼球方位确定视线方向,将位于视线方向上的设备确定为被注视设备(图1-1中未示出),得到至少一个被注视设备,其中,眼球方位采用当前瞳孔位置相对于预设的基准瞳孔位置的偏移值来表征,基准瞳孔位置可以为瞳孔位于眼睛中心时的位置,也可以为瞳孔位于眼睛的任意其他位置时的位置,针对不同的用户,该基准瞳孔位置可以不同,处理组件13可以通过机器学习确定基准瞳孔位置,也可以根据人眼标准模板确定基准瞳孔位置,本发明实施例对此不作限定。可选地,处理组件13可以分别确定左眼的眼球方位和右眼的眼球方位,然后根据左眼的眼球方位和右眼的眼球方位共同确定视线方向,并将位于视线方向上的设备确定为被注视设备。示例地,如图1-2所示,右眼的眼球方位可以采用右眼的当前瞳孔位置K1相对于右眼的预设的基准瞳孔位置K的偏移值来表征,该右眼的当前瞳孔位置K1相对于右眼的预设的基准瞳孔位置K的偏移值可以包括x轴上的偏移值x1和y轴上的偏移值y1,同理,左眼的当前瞳孔位置K2相对于左眼的预设的基准瞳孔位置K的偏移值可以包括x轴上的偏移值x2和y轴上的偏移值y2,处理组件(图1-2中未示出)可以根据左眼的眼球方位和右眼的眼球方位共同确定视线方向s,将位于视线方向s上的设备2确定为被注视设备。需要说明的是,图1-2是以位于视线方向上的设备为一个设备为例进行说明的,实际应用中,位于视线方向上的设备可以有多个,从而,处理组件可以确定出至少一个被注视设备,本发明实施例在此不再赘述。
处理组件13还用于根据眼部图像确定瞳孔尺寸,根据瞳孔尺寸确定注视距离。其中,眼部图像采集组件采集的眼部图像中包括瞳孔图像,处理组件13可以根据眼部图像确定瞳孔图像与该眼部图像的尺寸比例,然后获取眼部图像采集组件采集眼部图像时使用的焦距,进而根据焦距计算出眼睛的实际尺寸,根据眼睛的实际尺寸以及瞳孔图像与眼部图像的尺寸比例,计算得到瞳孔的实际尺寸,该瞳孔的实际尺寸也即是瞳孔尺寸。其中,人眼在注视不同距离时,瞳孔的大小也会不同,处理组件13可以存储瞳孔尺寸与注视距离的对应关系,该对应关系用于指示注视相应的距离时的瞳孔尺寸,在计算得到瞳孔尺寸后,处理组件13可以查询该瞳孔尺寸与注视距离的对应关系,得到瞳孔尺寸对应的距离,并将该瞳孔尺寸对应的距离作为相应的注视距离。需要说明的是,在本发明实施例中,瞳孔尺寸与注视距离的对应关系可以是在遥控设备10出厂之前就配置好的,也可以是处理组件13通过机器学习的方法确定的,本发明实施例对此不作限定。
环境信息采集组件14为距离采集组件,距离采集组件用于采集处理组件13确定的至少一个被注视设备中的每个被注视设备与遥控设备10之间的测量距离。示例地,以距离采集组件为红外线测距传感器,且以被注视设备为图1-2中的设备2为例,红外线测距传感器可以包括红外线发射管和红外线接收管,红外线发射管用于向设备2发射出红外光,红外光在照射到设备2时,设备2对红外光进行反射,反射后的红外光到达红外线接收管并被红外线接收管接收,根据发射红外光的时刻与接收红外光的时刻计算红外光的传播时长,并结合光速计算得到红外线测距传感器与设备2之间的测量距离,然后将红外线测距传感器与设备2之间的测量距离作为遥控设备10与设备2之间的测量距离。
处理组件13还用于根据至少一个被注视设备中的每个被注视设备与遥控设备10之间的测量距离和注视距离,在至少一个被注视设备中确定受控设备。可选地,处理组件13可以在至少一个被注视设备中,选择测量距离与注视距离最接近的设备作为受控设备。具体地,距离采集组件可以确定至少一个测量距离,每个测量距离与一个被注视设备对应,处理组件13可以将至少一个测量距离中的每个测量距离与注视距离进行比较,根据比较结果确定出与注视距离最接近的测量距离,将该与注视距离最接近的测量距离对应的被注视设备确定为受控设备。示例地,假设至少一个被注视设备包括设备1、设备2和设备3,设备1与遥控设备10之间的测量距离为a,设备2与遥控设备10之间的测量距离为b,设备3与遥控设备10之间的测量距离为c,假设注视距离为b1并且b与b1最接近,则处理组件13将设备2确定为受控设备。
第二方面,眼部信息采集组件13为眼部图像采集组件,环境信息采集组件14为环境图像采集组件。
眼部图像采集组件用于采集用户的眼部图像;处理组件13用于根据眼部图像确定眼球方位,根据眼球方位确定视线方向,将位于视线方向上的设备确定为被注视设备,得到至少一个被注视设备,其中,眼球方位采用当前瞳孔位置相对于预设的基准瞳孔位置的偏移值来表征;处理组件13还用于根据眼部图像确定瞳孔尺寸,根据瞳孔尺寸确定注视距离。此过程的实现过程可以参考上述第一方面,本发明实施例在此不再赘述。
环境信息采集组件14为环境图像采集组件,环境图像采集组件用于采集用户前方环境的环境图像,环境图像中包括至少一个被注视设备的图像。其中,环境图像采集组件可以朝向用户前方的环境,用户前方的环境中包括至少一个被注视设备,因此,环境图像采集组件采集的用户前方环境的环境图像中可以包括至少一个被注视设备的图像。在本发明实施例中,环境图像采集组件可以为摄像头,摄像头朝向用户前方环境,摄像头通过拍摄采集用户前方环境的环境图像,该摄像头能够主动或被动对焦,本发明实施例对此不作限定。
处理组件13还用于根据环境图像,确定至少一个被注视设备中的每个被注视设备与遥控设备之间的测量距离。可选地,处理组件13可以根据环境图像确定至少一个被注视设备中的每个被注视设备的图像与环境图像的尺寸比例,然后获取摄像头拍摄环境图像时使用的焦距,进而根据焦距以及每个被注视设备的图像与环境图像的尺寸比例,计算得到每个被注视设备与摄像头之间的测量距离,将每个被注视设备与摄像头之间的测量距离确定为每个被注视设备与遥控设备10之间的测量距离,本发明实施例对此不作限定。
处理组件13还用于根据至少一个被注视设备中的每个被注视设备与遥控设备之间的测量距离和注视距离,在至少一个被注视设备中确定受控设备。此过程的实现过程可以参考上述第一方面,本发明实施例在此不再赘述。
需要说明的是,在本发明实施例中,遥控设备10在对受控设备进行控制之前,可以先对用户进行身份验证,以确定用户对受控设备是否具有控制权限,这样可以避免任何人都能够对受控设备进行控制,提高受控设备的安全性。其中,可以由遥控设备10对用户进行身份验证,也可以由受控设备对用户进行身份验证,还可以设置专门用于进行身份验证的验证设备,由验证设备对用户进行身份验证。具体可以参考下述三个方面的描述:
第一方面,由遥控设备10对用户进行身份验证。如图1-1所示,该遥控设备10还包括:验证信息采集组件15,验证信息采集组件15设置在设备本体11上,且验证信息采集组件15与处理组件13电连接(图1-1中未示出)。验证信息采集组件15用于采集用户的身份验证信息,身份验证信息用于验证用户对受控设备的控制权限;处理组件13用于根据身份验证信息对用户进行身份验证,并在身份验证成功后,允许对受控设备进行控制。
具体地,处理组件13中可以存储身份验证信息与设备标识的对应关系,该对应关系用于指示具有相应身份验证信息的设备能够对相应的设备标识指示的设备进行控制。处理组件13可以根据验证信息采集组件15采集的身份验证信息,查询自身存储的身份验证信息与设备标识的对应关系,得到与验证信息采集组件15采集的身份验证信息对应的设备标识,然后判断查询得到的设备标识与受控设备的标识是否相同,若查询得到的设备标识与受控设备的标识相同,则处理组件13确定对身份验证成功,处理组件13允许对受控设备进行控制,否则,处理组件13确定身份验证失败,处理组件13不允许对受控设备进行控制。需要说明的是,本发明实施例是以身份验证信息与设备标识的对应关系中存在验证信息采集组件15采集的身份验证信息以及该身份验证信息对应的设备标识的对应关系为例进行说明的,当身份验证信息与设备标识的对应关系中不存在验证信息采集组件15采集的身份验证信息以及该身份验证信息对应的设备标识的对应关系时,处理组件13确定身份验证失败。
第二方面,由受控设备对用户进行身份验证。如图1-1所示,该遥控设备10还包括:验证信息采集组件15和通信组件16,验证信息采集组件15和通信组件16均设置在设备本体11上,且通信组件16分别与验证信息采集组件15和处理组件13电连接(图1-1中未示出)。验证信息采集组件15用于采集用户的身份验证信息,并通过通信组件16向受控设备发送身份验证信息,使受控设备根据身份验证信息对用户进行身份验证,身份验证信息用于验证用户对受控设备的控制权限;处理组件13用于在受控设备对用户的身份验证成功后,允许对受控设备进行控制。
具体地,受控设备中可以存储身份验证信息,受控设备接收到通信组件16发送的身份验证信息后,可以判断自身存储的身份验证信息中是否存在与通信组件16发送的身份验证信息相同的身份验证信息,若存在,则受控设备确定对用户的身份验证成功,受控设备向通信组件16发送用于指示身份验证成功的验证结果,处理组件13根据通信组件16接收到的验证结果,确定用户的身份验证成功,处理组件13允许对受控设备进行控制,否则,处理组件13确定身份验证失败,处理组件13不允许对受控设备进行控制。
第三方面,由验证设备(图1-1中未示出)对用户进行身份验证。如图1-1所示,该遥控设备10还包括:验证信息采集组件15和通信组件16,验证信息采集组件15和通信组件16均设置在设备本体11上,且通信组件16分别与验证信息采集组件15和处理组件13电连接(图1-1中未示出)。验证信息采集组件15用于采集用户的身份验证信息,并通过通信组件16向验证设备发送身份验证信息,使验证设备根据身份验证信息对用户进行身份验证,身份验证信息用于验证用户对受控设备的控制权限;处理组件13用于在验证设备对用户的身份验证成功后,允许对受控设备进行控制。
具体地,验证设备中可以存储身份验证信息与设备标识的对应关系,该对应关系用于指示具有相应身份验证信息的设备能够对相应的设备标识指示的设备进行控制。验证设备可以根据通信组件16发送的身份验证信息,查询自身存储的身份验证信息与设备标识的对应关系,得到与通信组件16发送的身份验证信息对应的设备标识,然后将与通信组件16发送的身份验证信息对应的设备标识发送给通信组件16,处理组件13判断通信组件16接收到的设备标识与受控设备的标识是否相同,若接收到的设备标识与受控设备的标识相同,则处理组件13确定对用户的身份验证成功,处理组件13允许对受控设备进行控制,否则,处理组件13确定身份验证失败,处理组件13不允许对受控设备进行控制。需要说明的是,本发明实施例是以身份验证信息与设备标识的对应关系中存在通信组件16发送的身份验证信息以及该身份验证信息对应的设备标识的对应关系为例进行说明的,当身份验证信息与设备标识的对应关系中不存在通信组件16发送的身份验证信息以及该身份验证信息对应的设备标识的对应关系时,处理组件13确定身份验证失败。
可选地,在本发明实施例中,上述身份验证信息可以为虹膜信息、指纹信息、掌纹信息和语音信息中的任意一种,且虹膜信息可以为虹膜图像。相应的,验证信息采集组件15可以为虹膜识别摄像头、指纹识别传感器、掌纹识别传感器和语音识别组件中的任意一种,当验证信息采集组件15可以为虹膜识别摄像头时,该虹膜识别摄像头可以集成在眼部信息采集组件13上,本发明实施例在此不再赘述。
可选地,在本发明实施例中,上述通信组件16可以为无线通信组件或有线通信组件,且具体可以为蓝牙组件、无线保真(英文:Wireless Fidelity;简称:WiFi)组件或者网络接口。遥控设备10上可以设置有语音识别组件、动作识别组件或者手势识别组件,遥控设备10可以识别用户的语音控制命令,动作控制命令或手势控制命令,然后根据相应的控制命令对受控设备进行控制。具体地,遥控设备10的通信组件16可以将控制命令发送给受控设备,受控设备根据接收到的控制命令执行相应的动作,本发明实施例在此不再赘述。
进一步地,请继续参考图1-1,该遥控设备10还包括:呈现组件17,呈现组件17设置在设备本体11上,且呈现组件17与处理组件12电连接(图1-1中未示出);呈现组件17用于呈现受控设备的信息。在本发明实施例中,呈现组件17可以包括至少一个显示组件,显示组件具体可以为显示屏,每个显示组件可以显示与遥控设备10相关的信息以及受控设备的信息等,该受控设备的信息可以为受控设备的标识或受控设备的图像等。本发明实施例提供的遥控设备10可以为增强现实(英文:Augmented Reality;简称:AR)遥控设备,处理组件13可以对受控设备的图像进行增强现实处理,显示组件可以显示受控设备的增强显示图像,为用户提供更加逼真的受控设备的图像,增强用户的沉浸感,本发明实施例对此不作限定。
需要说明的是,本发明实施例提供的遥控设备还可以包括重力传感器等其他组件,并且可以根据实际应用场景的需要增加新的组件,本发明实施例对此不作限定。
本发明实施例提供的遥控设备可以用于电子门锁、无人机、汽车驾驶等。比如,用户佩戴遥控设备到达家门口,观察门上安装的电子门锁,遥控设备识别到门锁并尝试与门锁通讯,将用户身份验证信息发送给电子门锁,电子门锁识别用户权限后解锁。再比如,用户佩戴遥控设备控制无人机,遥控设备判断人眼观察位置,将该位置规划为无人机飞行目标,同时也可以通过语音、动作、手势等对无人机进行控制。又比如,用户佩戴遥控设备控制汽车,遥控设备判断人眼观察位置,将该位置规划为汽车行驶方向,环境信息采集组件与距离采集组件可以采集汽车前方路况信息、车辆信息并反馈给处理组件,处理组件根据汽车前方路况信息、车辆信息优化车辆行驶方向、速度等。
综上所述,本发明实施例提供的遥控设备,由于遥控设备能够根据用户的眼部信息和用户前方环境的环境信息确定受控设备,并对受控设备进行控制。因此,无需用户手动操作遥控设备就可以使遥控设备对受控设备进行控制,解决了采用遥控器控制受控设备的操作过程复杂的问题,简化了控制受控设备的操作过程。
本发明实施例提供的遥控设备可以应用于计算机、手机、家电、开关、锁具、车载、无人机、可穿戴设备等物联网电子设备,具有快捷、智能、安全等诸多优点。
本发明实施例提供的遥控设备,通过采用验证设备对用户身份进行验证,可以无需在每个受控设备上都设置验证组件,降低了对受控设备的要求,且能够实时高效的进行身份验证,无需额外增加验证解锁动作。
请参考图2,其示出了本发明实施例提供的一种遥控系统的结构示意图,参见图2,该遥控系统包括:遥控设备10和n个设备,n为大于或等于1的整数。
其中,n个设备包括设备1、设备2等,该n个设备中的每个设备可以为电脑、电视机、智能冰箱、智能插座、智能空调、手机、智能开关、锁具、车载终端、无人机、可穿戴设备等物联网电子设备,且该n个设备可以相同,也可以不同。
遥控设备10可以采集用户的眼部信息和用户前方环境的环境信息,根据眼部信息和环境信息在上述n个设备中确定受控设备,该受控设备可以为设备2。
可选地,如图2所示,该遥控系统还包括网络设备20,该网络设备20用于向遥控设备10提供有线网络或无线网络,使遥控设备10能够通过有线网络或无线网络对受控设备进行控制。其中,该网络设备20可以为交换机、路由器等,本发明实施例对此不作限定。
综上所述,本发明实施例提供的遥控系统,由于遥控设备能够根据用户的眼部信息和用户前方环境的环境信息确定受控设备,并对受控设备进行控制。因此,无需用户手动操作遥控设备就可以使遥控设备对受控设备进行控制,解决了采用遥控器控制受控设备的操作过程复杂的问题,简化了控制受控设备的操作过程。
请参考图3-1,其示出了本发明实施例提供的一种遥控方法的方法流程图,该遥控方法可以用于图1-1所示的遥控设备10,参见图3-1,该遥控方法包括:
步骤301、采集用户的眼部信息。
遥控设备设置有眼部信息采集组件,遥控设备可以通过眼部信息采集组件采集用户的眼部信息。示例地,眼部信息采集组件可以为眼部图像采集组件,且具体可以为摄像头,遥控设备可以通过摄像头拍摄的方式采集用户的眼部图像。
在本发明实施例中,遥控设备包括设备本体,且设备本体为眼镜、头盔等能够穿戴在用户头部的可穿戴结构,眼部信息采集组件设置在设备本体的内侧,在设备本体被用户穿戴时,该眼部信息采集组件朝向用户眼部,以便于对用户的眼部信息的采集。
步骤302、采集用户前方环境的环境信息。
遥控设备设置有环境信息采集组件,遥控设备可以通过环境信息采集组件采集用户前方环境的环境信息。示例地,环境信息采集组件可以为距离采集组件或环境图像采集组件,相应的,环境信息可以为环境图像或者环境中的设备与遥控设备之间的距离。其中,距离采集组件具体可以为红外线测距传感器、微波测距传感器、超声波测距传感器或激光测距传感器等,环境图像采集组件可以为摄像头,本发明实施例对此不作限定。
在本发明实施例中,环境信息采集组件设置在设备本体的外侧,在设备本体被用户穿戴时,该环境信息采集组件朝向用户前方环境,以便于对用户前方环境的环境信息的采集。
步骤303、根据眼部信息和环境信息确定受控设备。
遥控设备采集到眼部信息和环境信息后,可以根据眼部信息和环境信息确定受控设备。其中,遥控设备包括处理组件,眼部信息采集组件和环境信息采集组件分别与处理组件电连接,可以由处理组件根据眼部信息和环境信息确定受控设备。
在本发明实施例中,眼部信息为眼部图像,环境信息为至少一个被注视设备中的每个被注视设备与遥控设备之间的测量距离;或者,眼部信息为眼部图像,环境信息为环境图像,且环境图像中包括至少一个被注视设备的图像。以下结合图3-2和图3-3对本发明实施例提供的确定受控设备的过程进行说明。
示例地,请参考图3-2,其示出的是图3-1所示实施例提供的一种根据眼部信息和环境信息确定受控设备的方法流程图,该图3-2以环境信息为至少一个被注视设备中的每个被注视设备与遥控设备之间的测量距离为例进行说明。参见图3-2,该方法包括:
子步骤3031A、根据眼部图像确定眼球方位,眼球方位采用当前瞳孔位置相对于预设的基准瞳孔位置的偏移值来表征。
其中,基准瞳孔位置可以为瞳孔位于眼睛中心时的位置,也可以为瞳孔位于眼睛的任意其他位置时的位置,针对不同的用户,该基准瞳孔位置可以不同,遥控设备可以通过机器学习确定基准瞳孔位置,也可以根据人眼标准模板确定基准瞳孔位置,本发明实施例对此不作限定。
在本发明实施例中,眼部图像中包括左眼的图像和右眼的图像,遥控设备可以根据眼部图像,分别确定左眼的眼球方位和右眼的眼球方位。示例地,如图1-2所示,右眼的眼球方位可以采用右眼的当前瞳孔位置K1相对于右眼的预设的基准瞳孔位置K的偏移值来表征,该右眼的当前瞳孔位置K1相对于右眼的预设的基准瞳孔位置K的偏移值可以包括x轴上的偏移值x1和y轴上的偏移值y1,同理,左眼的当前瞳孔位置K2相对于左眼的预设的基准瞳孔位置K的偏移值可以包括x轴上的偏移值x2和y轴上的偏移值y2。
子步骤3032A、根据眼球方位确定视线方向。
遥控设备确定眼球方位后,可以根据眼球方位确定视线方向。具体地,遥控设备根据左眼的眼球方位和右眼的眼球方位共同确定视线方向。如图1-2所示,遥控设备根据左眼的眼球方位和右眼的眼球方位共同确定视线方向s。
子步骤3033A、将位于视线方向上的设备确定为被注视设备,得到至少一个被注视设备。
遥控设备确定视线方向后,可以将位于视线方向上的设备确定为被注视设备。如图1-2所示,位于视线方向s上的设备为设备2,因此,遥控设备将设备2作为被注视设备。需要说明的是,图1-2是以位于视线方向上的设备为一个设备为例进行说明的,实际应用中,位于视线方向上的设备可以有多个,从而,遥控设备可以确定出至少一个被注视设备,本发明实施例在此不再赘述。
子步骤3034A、采集至少一个被注视设备中的每个被注视设备与遥控设备之间的测量距离。
遥控设备设置有距离采集组件,可以通过距离采集组件采集至少一个被注视设备中的每个被注视设备与遥控设备之间的测量距离。
示例地,以距离采集组件为红外线测距传感器,且以被注视设备为图1-2中的设备2为例,红外线测距传感器可以包括红外线发射管和红外线接收管,红外线发射管用于向设备2发射出红外光,红外光在照射到设备2时,设备2对红外光进行反射,反射后的红外光到达红外线接收管并被红外线接收管接收,根据发射红外光的时刻与接收红外光的时刻计算红外光的传播时长,并结合光速计算得到红外线测距传感器与设备2之间的测量距离,进而将红外线测距传感器与设备2之间的测量距离作为遥控设备10与设备2之间的测量距离。
子步骤3035A、根据眼部图像确定瞳孔尺寸。
在本发明实施例中,眼部图像中包括瞳孔图像,遥控设备可以根据眼部图像确定瞳孔图像与眼部图像的尺寸比例,然后获取采集眼部图像时使用的焦距,进而根据焦距计算出眼睛的实际尺寸,根据眼睛的实际尺寸以及瞳孔图像与眼部图像的尺寸比例,计算得到瞳孔的实际尺寸,该瞳孔的实际尺寸也即是瞳孔尺寸,本发明实施例对此不作限定。
子步骤3036A、根据瞳孔尺寸确定注视距离。
人眼在注视不同距离时,瞳孔的大小也会不同,因此,遥控设备可以根据遥控设备。具体地,遥控设备可以存储瞳孔尺寸与注视距离的对应关系,该对应关系用于指示注视相应的距离时的瞳孔尺寸,遥控设备可以查询瞳孔尺寸与注视距离的对应关系,得到瞳孔尺寸对应的距离,并将该瞳孔尺寸对应的距离作为相应的注视距离。在本发明实施例中,瞳孔尺寸与注视距离的对应关系可以是在遥控设备出厂之前就配置好的,也可以是遥控设备通过机器学习的方法确定的,本发明实施例对此不作限定。
子步骤3037A、根据至少一个被注视设备中的每个被注视设备与遥控设备之间的测量距离和注视距离,在至少一个被注视设备中确定受控设备。
遥控设备确定至少一个被注视设备中的每个被注视设备与遥控设备之间的测量距离和用户的注视距离之后,可以根据根据至少一个被注视设备中的每个被注视设备与遥控设备之间的测量距离和注视距离,在至少一个被注视设备中确定受控设备。可选地,遥控设备在至少一个被注视设备中,选择测量距离与注视距离最接近的设备作为受控设备。
示例地,假设至少一个被注视设备包括设备1、设备2和设备3,设备1与遥控设备之间的测量距离为a,设备2与遥控设备之间的测量距离为b,设备3与遥控设备之间的测量距离为c,假设注视距离为b1并且b与b1最接近,则遥控设备将设备2确定为受控设备。
示例地。请参考图3-3,其示出的是图3-1所示实施例提供的另一种根据眼部信息和环境信息确定受控设备的方法流程图,该图3-2以环境信息为环境图像为例进行说明。参见图3-3,该方法包括:
子步骤3031B、根据眼部图像确定眼球方位,眼球方位采用当前瞳孔位置相对于预设的基准瞳孔位置的偏移值来表征。
子步骤3032B、根据眼球方位确定视线方向。
子步骤3033B、将位于视线方向上的设备确定为被注视设备,得到至少一个被注视设备。
上述子步骤3031B至子步骤3033B的实现过程可以参考图3-2所示实施例中的子步骤3031A至子步骤3033A,本发明实施例在此不再赘述。
子步骤3034B、根据环境图像,确定至少一个被注视设备中的每个被注视设备与遥控设备之间的测量距离。
环境图像中可以包括至少一个被注视设备的图像,遥控设备可以根据环境图像,确定至少一个被注视设备中的每个被注视设备与遥控设备之间的测量距离。可选地,遥控设备可以根据环境图像确定至少一个被注视设备中的每个被注视设备的图像与该环境图像的尺寸比例,然后获取摄像头拍摄环境图像时使用的焦距,进而根据焦距以及每个被注视设备的图像与该环境图像的尺寸比例,计算得到每个被注视设备与摄像头之间的测量距离,将每个被注视设备与摄像头之间的测量距离确定为每个被注视设备与遥控设备之间的测量距离,本发明实施例对此不作限定。
子步骤3035B、根据眼部图像确定瞳孔尺寸。
子步骤3036B、根据瞳孔尺寸确定注视距离。
子步骤3037B、根据至少一个被注视设备中的每个被注视设备与遥控设备之间的测量距离和注视距离,在至少一个被注视设备中确定受控设备。
上述子步骤3035B至子步骤3037B的实现过程可以参考图3-2所示实施例中的子步骤3035A至子步骤3037A,本发明实施例在此不再赘述。
步骤304、呈现受控设备的信息。
遥控设备设置有呈现组件,遥控设备可以通过呈现组件呈现受控设备的信息。在本发明实施例中,呈现组件可以为显示组件,具体可以为显示屏,受控设备的信息可以为受控设备的标识或受控设备的图像等。
需要说明的是,本发明实施例提供的遥控设备可以为AR遥控设备,AR遥控设备可以对受控设备的图像进行增强现实处理,并显示受控设备的增强显示图像,为用户提供更加逼真的受控设备的图像,增强用户的沉浸感。
步骤305、对用户进行身份验证。
遥控设备在对受控设备进行控制之前,可以先对用户进行身份验证,以确定用户对受控设备是否具有控制权限,这样可以避免任何人都能够对受控设备进行控制,提高受控设备的安全性。其中,可以由遥控设备对用户进行身份验证,也可以由受控设备对用户进行身份验证,还可以设置专门用于进行身份验证的验证设备,由验证设备对用户进行身份验证。具体可以参考下述图3-4至图3-6所示实施例。
示例地,请参考图3-4,其示出的是图3-1所示实施例提供的一种对用户进行身份验证的方法流程图,该图3-4以遥控设备对用户进行身份验证为例进行说明,参见图3-4,该方法包括:
子步骤3051A、采集用户的身份验证信息,身份验证信息用于验证用户对受控设备的控制权限。
遥控设备设置有验证信息采集组件,可以通过验证信息采集组件采集用户的身份验证信息,该身份验证信息用于验证用户对受控设备的控制权限。其中,身份验证信息可以为虹膜信息、指纹信息、掌纹信息和语音信息中的任意一种。相应的,验证信息采集组件可以为虹膜识别摄像头、指纹识别传感器、掌纹识别传感器和语音识别组件中的任意一种。
子步骤3052A、根据身份验证信息对用户进行身份验证。
遥控设备采集用户的身份验证信息后,可以根据身份验证信息对用户进行身份验证。具体地,遥控设备中可以存储身份验证信息与设备标识的对应关系,该对应关系用于指示具有相应身份验证信息的设备能够对相应的设备标识指示的设备进行控制。遥控设备可以根据采集的身份验证信息,查询自身存储的身份验证信息与设备标识的对应关系,得到与采集的身份验证信息对应的设备标识,然后判断查询得到的设备标识与受控设备的标识是否相同,若查询得到的设备标识与受控设备的标识相同,则遥控设备确定对身份验证成功,否则,遥控设备确定身份验证失败。
示例地,请参考图3-5,其示出的是图3-1所示实施例提供的另一种对用户进行身份验证的方法流程图,该图3-5以受控设备对用户进行身份验证为例进行说明,参见图3-5,该方法包括:
子步骤3051B、遥控设备采集用户的身份验证信息,身份验证信息用于验证用户对受控设备的控制权限。
该子步骤3051B可以参考图3-4所示实施例中的子步骤3051A,本发明实施例在不再赘述。
子步骤3052B、遥控设备向受控设备发送身份验证信息。
遥控设备采集到用户的身份验证信息后,可以向受控设备发送身份验证信息。其中,遥控设备设置有通信组件,遥控设备可以通过通信组件受控设备发送身份验证信息。
子步骤3053B、受控设备根据身份验证信息对用户进行身份验证。
遥控设备向受控设备发送身份验证信息时,受控设备可以接收遥控设备发送的身份验证信息,并根据身份验证信息对用户进行身份验证。
具体地,受控设备中可以存储身份验证信息,受控设备接收到遥控设备发送的身份验证信息后,可以判断自身存储的身份验证信息中是否存在与遥控设备发送的身份验证信息相同的身份验证信息,若存在,则受控设备确定对用户的身份验证成功,否则,受控设备确定身份验证失败。
子步骤3054B、受控设备向遥控设备发送验证结果。
受控设备对用户进行身份验证后,可以向遥控设备发送验证结果,该验证结果可以指示身份验证成功或身份验证失败,本发明实施例以验证结果指示身份验证成功为例进行说明。具体地,受控设备可以向遥控设备的通信组件发送验证结果,本发明实施例对此不作限定。
子步骤3055B、遥控设备根据验证结果确定身份验证成功。
受控设备向遥控设备发送验证结果时,遥控设备可以接收验证结果,由于本发明实施例以验证结果指示身份验证成功为例进行说明,因此,遥控设备根据验证结果确定身份验证成功。
示例地,请参考图3-6,其示出的是图3-1所示实施例提供的再一种对用户进行身份验证的方法流程图,该图3-6以验证设备对用户进行身份验证为例进行说明,参见图3-6,该方法包括:
子步骤3051C、遥控设备采集用户的身份验证信息,身份验证信息用于验证用户对受控设备的控制权限。
该子步骤3051B可以参考图3-4所示实施例中的子步骤3051A,本发明实施例在不再赘述。
子步骤3052C、遥控设备向验证设备发送身份验证信息。
遥控设备采集到用户的身份验证信息后,可以向验证设备发送身份验证信息。其中,遥控设备设置有通信组件,遥控设备可以通过通信组件验证设备发送身份验证信息,该验证设备可以为手机、电脑等智能终端。
子步骤3053C、验证设备根据身份验证信息对用户进行身份验证。
遥控设备向验证设备发送身份验证信息时,验证设备可以接收遥控设备发送的身份验证信息,并根据身份验证信息对用户进行身份验证。
具体地,验证设备中可以存储身份验证信息与设备标识的对应关系,该对应关系用于指示具有相应身份验证信息的设备能够对相应的设备标识指示的设备进行控制。验证设备可以根据遥控设备发送的身份验证信息,查询自身存储的身份验证信息与设备标识的对应关系,得到与遥控设备发送的身份验证信息对应的设备标识,该过程可以称为身份验证过程。
子步骤3054C、验证设备向遥控设备发送验证结果。
验证设备可以向遥控设备发送验证结果,该验证结果中包括验证设备查询得到的设备标识。具体地,验证设备向遥控设备的通信组件发送验证结果,本发明实施例对此不作限定。
子步骤3055C、遥控设备根据验证结果确定身份验证成功。
验证设备向遥控设备发送验证结果时,遥控设备可以接收验证结果,然后根据验证结果确定身份验证是否成功。具体地,遥控设备判断验证结果中的设备标识与受控设备的标识是否相同,若验证结果中的设备标识与受控设备的标识相同,则遥控设备确定对用户的身份验证成功,否则,遥控设备确定对用户的身份验证失败。
步骤306、对受控设备进行控制。
在对用户验证成功后,遥控设备可以对受控设备进行控制。具体地,在对用户验证成功后,遥控设备允许用户对受控设备进行控制。
在本发明实施例中,遥控设备上可以设置有语音识别组件、动作识别组件或手势识别组件,遥控设备可以识别用户的语音控制命令,动作控制命令或手势控制命令,然后根据相应的控制命令对受控设备进行控制,本发明实施例在此不再赘述。
需要说明的是,本发明实施例提供的遥控方法的步骤的先后顺序可以进行适当调整,步骤也可以根据情况进行相应增减。任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化的方法,都应涵盖在本发明的保护范围之内,因此不再赘述。
综上所述,本发明实施例提供的遥控方法,由于遥控设备能够根据用户的眼部信息和用户前方环境的环境信息确定受控设备,并对受控设备进行控制。因此,无需用户手动操作遥控设备就可以使遥控设备对受控设备进行控制,解决了采用遥控器控制受控设备的操作过程复杂的问题,简化了控制受控设备的操作过程。
下述为本发明装置实施例,可以用于执行本发明方法实施例。对于本发明装置实施例中未披露的细节,请参照本发明方法实施例。
请参考图4-1,其示出了本发明实施例提供的一种遥控装置400的框图,该遥控装置400可以通过软件、硬件或者二者的结合实施成为图1-1的遥控设备10的部分或者全部,参见图4-1,该遥控装置400可以包括但不限于:
第一采集模块401,用于采集用户的眼部信息;
第二采集模块402,用于采集用户前方环境的环境信息;
确定模块403,用于根据眼部信息和环境信息确定受控设备;
控制模块404,用于对受控设备进行控制。
综上所述,本发明实施例提供的遥控装置,由于遥控设备能够根据用户的眼部信息和用户前方环境的环境信息确定受控设备,并对受控设备进行控制。因此,无需用户手动操作遥控设备就可以使遥控设备对受控设备进行控制,解决了采用遥控器控制受控设备的操作过程复杂的问题,简化了控制受控设备的操作过程。
可选地,眼部信息为眼部图像,环境信息为至少一个被注视设备中的每个被注视设备与遥控设备之间的测量距离,确定模块403,用于:
根据眼部图像确定眼球方位,眼球方位采用当前瞳孔位置相对于预设的基准瞳孔位置的偏移值来表征;
根据眼球方位确定视线方向;
将位于视线方向上的设备确定为被注视设备,得到至少一个被注视设备;
根据眼部图像确定瞳孔尺寸;
根据瞳孔尺寸确定注视距离;
根据至少一个被注视设备中的每个被注视设备与遥控设备之间的测量距离和注视距离,在至少一个被注视设备中确定受控设备。
可选地,眼部信息为眼部图像,环境信息为环境图像,环境图像中包括至少一个被注视设备的图像,确定模块403,用于:
根据眼部图像确定眼球方位,眼球方位采用当前瞳孔位置相对于预设的基准瞳孔位置的偏移值来表征;
根据眼球方位确定视线方向;
将位于视线方向上的设备确定为被注视设备,得到至少一个被注视设备;
根据眼部图像确定瞳孔尺寸;
根据瞳孔尺寸确定注视距离;
根据环境图像,确定至少一个被注视设备中的每个被注视设备与遥控设备之间的测量距离;
根据至少一个被注视设备中的每个被注视设备与遥控设备之间的测量距离和注视距离,在至少一个被注视设备中确定受控设备。
可选地,确定模块403,用于在至少一个被注视设备中,选择测量距离与注视距离最接近的设备作为受控设备。
可选地,请参考图4-2,其示出了本发明实施例提供的另一种遥控装置400的框图,参见图4-2,在图4-1的基础上,该遥控装置400还包括:
第三采集模块405,用于采集用户的身份验证信息,身份验证信息用于验证用户对受控设备的控制权限;
第一验证模块406,用于根据身份验证信息对用户进行身份验证;
控制模块404,用于在身份验证成功后,允许对受控设备进行控制。
可选地,请参考图4-3,其示出了本发明实施例提供的再一种遥控装置400的框图,参见图4-3,在图4-1的基础上,该遥控装置400还包括:
第四采集模块407,用于采集用户的身份验证信息,身份验证信息用于验证用户对受控设备的控制权限;
第一发送模块408,用于向受控设备发送身份验证信息,使受控设备根据身份验证信息对用户进行身份验证;
控制模块404,用于在受控设备对用户的身份验证成功后,允许对受控设备进行控制。
可选地,请参考图4-4,其示出了本发明实施例提供的再一种遥控装置400的框图,参见图4-4,在图4-1的基础上,该遥控装置400还包括:
第五采集模块409,用于采集用户的身份验证信息,身份验证信息用于验证用户对受控设备的控制权限;
第二发送模块410,用于向验证设备发送身份验证信息,使验证设备根据身份验证信息对用户进行身份验证;
控制模块404,用于在验证设备对用户的身份验证成功后,允许对受控设备进行控制。
如图4-2至图4-4任一所示,该遥控装置400还包括:呈现模块411,用于呈现受控设备的信息。
综上所述,本发明实施例提供的遥控装置,由于遥控设备能够根据用户的眼部信息和用户前方环境的环境信息确定受控设备,并对受控设备进行控制。因此,无需用户手动操作遥控设备就可以使遥控设备对受控设备进行控制,解决了采用遥控器控制受控设备的操作过程复杂的问题,简化了控制受控设备的操作过程。
需要说明的是:上述实施例提供的遥控装置在控制受控设备时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的遥控设备、遥控方法及遥控装置的实施例属于同一构思,实现过程可以相互参考,这里不再赘述。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (8)

1.一种遥控设备,其特征在于,所述遥控设备包括:
设备本体、处理组件、眼部信息采集组件和环境信息采集组件,所述处理组件、所述眼部信息采集组件和所述环境信息采集组件均设置在所述设备本体上,且所述眼部信息采集组件和所述环境信息采集组件分别与所述处理组件电连接;
所述眼部信息采集组件用于采集用户的眼部信息;
所述环境信息采集组件用于采集用户前方环境的环境信息;
所述处理组件用于根据所述眼部信息和所述环境信息确定受控设备,并对所述受控设备进行控制;
其中,所述眼部信息采集组件为眼部图像采集组件,所述眼部信息为眼部图像,
所述处理组件用于根据所述眼部图像确定眼球方位,根据所述眼球方位确定视线方向,将位于所述视线方向上的设备确定为被注视设备,得到至少一个被注视设备,其中,所述眼球方位采用当前瞳孔位置相对于预设的基准瞳孔位置的偏移值来表征;
所述处理组件还用于根据所述眼部图像确定瞳孔尺寸,根据所述瞳孔尺寸确定注视距离;
所述环境信息采集组件为距离采集组件,
所述距离采集组件用于采集所述至少一个被注视设备中的每个被注视设备与所述遥控设备之间的测量距离;
所述处理组件还用于根据所述至少一个被注视设备中的每个被注视设备与所述遥控设备之间的测量距离和所述注视距离,在所述至少一个被注视设备中确定所述受控设备;
或者,所述环境信息采集组件为环境图像采集组件,
所述环境图像采集组件用于采集所述用户前方环境的环境图像,所述环境图像中包括所述至少一个被注视设备的图像;
所述处理组件还用于根据所述环境图像,确定所述至少一个被注视设备中的每个被注视设备与所述遥控设备之间的测量距离;
所述处理组件还用于根据所述至少一个被注视设备中的每个被注视设备与所述遥控设备之间的测量距离和所述注视距离,在所述至少一个被注视设备中确定所述受控设备。
2.根据权利要求1所述的遥控设备,其特征在于,
所述设备本体为可穿戴结构,所述眼部信息采集组件设置在所述设备本体的内侧,所述环境信息采集组件设置在所述设备本体的外侧,在所述设备本体被用户穿戴时,所述眼部信息采集组件朝向用户眼部,所述环境信息采集组件朝向用户前方环境。
3.根据权利要求1所述的遥控设备,其特征在于,
所述处理组件还用于在所述至少一个被注视设备中,选择测量距离与所述注视距离最接近的设备作为所述受控设备。
4.根据权利要求1或2所述的遥控设备,其特征在于,
所述遥控设备还包括:验证信息采集组件,所述验证信息采集组件设置在所述设备本体上,且与所述处理组件电连接;
所述验证信息采集组件用于采集用户的身份验证信息,所述身份验证信息用于验证所述用户对所述受控设备的控制权限;
所述处理组件用于根据所述身份验证信息对所述用户进行身份验证,并在身份验证成功后,允许对所述受控设备进行控制。
5.根据权利要求1或2所述的遥控设备,其特征在于,
所述遥控设备还包括:验证信息采集组件和通信组件,所述验证信息采集组件和所述通信组件均设置在所述设备本体上,且所述通信组件分别与所述验证信息采集组件和所述处理组件电连接;
所述验证信息采集组件用于采集用户的身份验证信息,并通过所述通信组件向所述受控设备发送所述身份验证信息,使所述受控设备根据所述身份验证信息对所述用户进行身份验证,所述身份验证信息用于验证所述用户对所述受控设备的控制权限;
所述处理组件用于在所述受控设备对所述用户的身份验证成功后,允许对所述受控设备进行控制。
6.根据权利要求1或2所述的遥控设备,其特征在于,
所述遥控设备还包括:验证信息采集组件和通信组件,所述验证信息采集组件和通信组件均设置在所述设备本体上,且所述通信组件分别与所述验证信息采集组件和所述处理组件电连接;
所述验证信息采集组件用于采集用户的身份验证信息,并通过所述通信组件向验证设备发送所述身份验证信息,使所述验证设备根据所述身份验证信息对所述用户进行身份验证,所述身份验证信息用于验证所述用户对所述受控设备的控制权限;
所述处理组件用于在所述验证设备对所述用户的身份验证成功后,允许对所述受控设备进行控制。
7.根据权利要求1或2所述的遥控设备,其特征在于,
所述遥控设备还包括:呈现组件,所述呈现组件设置在所述设备本体上,且与所述处理组件电连接;
所述呈现组件用于呈现所述受控设备的信息。
8.一种遥控系统,其特征在于,所述遥控系统包括:
受控设备和权利要求1至7任一所述的遥控设备。
CN201611053371.1A 2016-11-24 2016-11-24 遥控设备及遥控系统 Active CN106774848B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201611053371.1A CN106774848B (zh) 2016-11-24 2016-11-24 遥控设备及遥控系统
US15/679,142 US10274729B2 (en) 2016-11-24 2017-08-16 Remote control device, remote control product and remote control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611053371.1A CN106774848B (zh) 2016-11-24 2016-11-24 遥控设备及遥控系统

Publications (2)

Publication Number Publication Date
CN106774848A CN106774848A (zh) 2017-05-31
CN106774848B true CN106774848B (zh) 2019-10-18

Family

ID=58912365

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611053371.1A Active CN106774848B (zh) 2016-11-24 2016-11-24 遥控设备及遥控系统

Country Status (2)

Country Link
US (1) US10274729B2 (zh)
CN (1) CN106774848B (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN206894795U (zh) * 2017-05-23 2018-01-16 深圳市道通智能航空技术有限公司 一种实现图像处理的遥控器及无人飞行系统
CN107256027A (zh) * 2017-06-29 2017-10-17 北京小米移动软件有限公司 用于无人机的头盔及其控制方法
US10732826B2 (en) * 2017-11-22 2020-08-04 Microsoft Technology Licensing, Llc Dynamic device interaction adaptation based on user engagement
US10620721B2 (en) * 2018-01-29 2020-04-14 Google Llc Position-based location indication and device control
CN108288334A (zh) * 2018-01-31 2018-07-17 广东容祺智能科技有限公司 一种无人机防盗系统
JP7075237B2 (ja) * 2018-02-23 2022-05-25 ラピスセミコンダクタ株式会社 操作判定装置及び操作判定方法
CN109754587A (zh) * 2018-12-26 2019-05-14 天长市志铖电子科技有限公司 一种对无人机和遥控器配对的方法及遥控器
US10701661B1 (en) 2019-04-02 2020-06-30 Google Llc Location determination for device control and configuration
US11082249B2 (en) 2019-04-02 2021-08-03 Google Llc Location determination for device control and configuration
CN112053689A (zh) * 2020-09-11 2020-12-08 深圳市北科瑞声科技股份有限公司 基于眼球和语音指令的操作设备的方法和系统及服务器
CN115173938A (zh) * 2021-04-01 2022-10-11 华为技术有限公司 一种确定被注意设备的方法、装置及头戴式电子设备
US11635808B2 (en) * 2021-08-12 2023-04-25 International Business Machines Corporation Rendering information in a gaze tracking device on controllable devices in a field of view to remotely control

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9292086B2 (en) * 2012-09-26 2016-03-22 Grinbath, Llc Correlating pupil position to gaze location within a scene
US20160048249A1 (en) * 2014-08-14 2016-02-18 Honda Motor Co., Ltd. Wearable computing device for handsfree controlling of vehicle components and method therefor
CN105807674B (zh) * 2014-12-30 2021-05-04 北京奇虎科技有限公司 一种可控制音频终端的智能可穿戴设备及其控制方法
CN105677040A (zh) * 2016-02-17 2016-06-15 深圳创维数字技术有限公司 一种终端控制方法、装置及可穿戴设备

Also Published As

Publication number Publication date
CN106774848A (zh) 2017-05-31
US20180143432A1 (en) 2018-05-24
US10274729B2 (en) 2019-04-30

Similar Documents

Publication Publication Date Title
CN106774848B (zh) 遥控设备及遥控系统
CN105208333B (zh) 一种眼镜式通信装置、系统及方法
CN105141851B (zh) 无人飞行器用控制系统、无人飞行器及控制方法
KR102517610B1 (ko) 전자 기기
CN105138119A (zh) 一种基于人体生物特征控制自动变焦的立体视觉系统
KR20190103877A (ko) 전자 기기
CN103873959B (zh) 一种控制方法和电子设备
CN106843491A (zh) 带增强现实的智能设备及电子设备
KR102056221B1 (ko) 시선인식을 이용한 장치 연결 방법 및 장치
CN111526476B (zh) 数据传输方法、数据传输装置、存储介质与终端设备
CN106406551A (zh) 一种定位系统、定位终端以及定位网络
CN109358754B (zh) 一种混合现实头戴显示系统
CN206460410U (zh) 带增强现实的智能设备
CN106203410A (zh) 一种身份验证方法及系统
CN105700688A (zh) 虚拟现实/增强现实装置
KR20190103085A (ko) 지능형 진단 디바이스
CN206249245U (zh) 一种定位系统、定位终端以及定位网络
CN208723929U (zh) 一种ar遥控器
KR20170107137A (ko) 복수의 영상 데이터를 이용하는 헤드 마운트 디스플레이 장치 및 복수의 영상 데이터를 송수신하기 위한 시스템
CN107450722A (zh) 一种带有噪音过滤功能的双重交互控制头戴式显示设备和交互方法
CN109903416A (zh) 定点巡更管理系统及其方法
CN113641238A (zh) 一种控制方法、装置、终端设备、受控设备及存储介质
KR101802308B1 (ko) 실시간 사용자 시각에 대응되는 3차원 증강 현실 영상 시현 장치 및 복수의 사용자가 동시 참여하는 3차원 증강 현실 구현 시스템
KR20160015143A (ko) 포탄방향인식시스템, 글라스형 웨어러블 디바이스를 이용한 포탄 예상 탄착지 제공방법 및 프로그램
CN104581122A (zh) 三维图像的生成方法、装置、系统及移动终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant