CN112835454B - 一种智能眼镜的交互控制方法、可读存储介质及智能眼镜 - Google Patents

一种智能眼镜的交互控制方法、可读存储介质及智能眼镜 Download PDF

Info

Publication number
CN112835454B
CN112835454B CN202110431001.1A CN202110431001A CN112835454B CN 112835454 B CN112835454 B CN 112835454B CN 202110431001 A CN202110431001 A CN 202110431001A CN 112835454 B CN112835454 B CN 112835454B
Authority
CN
China
Prior art keywords
user
information
glasses
intelligent glasses
preset
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110431001.1A
Other languages
English (en)
Other versions
CN112835454A (zh
Inventor
孙立
胡金鑫
刘晖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanchang Small Walnut Technology Co ltd
Original Assignee
Jiangxi Yingchuang Information Industry Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangxi Yingchuang Information Industry Co ltd filed Critical Jiangxi Yingchuang Information Industry Co ltd
Priority to CN202110431001.1A priority Critical patent/CN112835454B/zh
Publication of CN112835454A publication Critical patent/CN112835454A/zh
Application granted granted Critical
Publication of CN112835454B publication Critical patent/CN112835454B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01DMEASURING NOT SPECIALLY ADAPTED FOR A SPECIFIC VARIABLE; ARRANGEMENTS FOR MEASURING TWO OR MORE VARIABLES NOT COVERED IN A SINGLE OTHER SUBCLASS; TARIFF METERING APPARATUS; MEASURING OR TESTING NOT OTHERWISE PROVIDED FOR
    • G01D21/00Measuring or testing not otherwise provided for
    • G01D21/02Measuring two or more variables by means not covered by a single other subclass
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/01Satellite radio beacon positioning systems transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/13Receivers
    • G01S19/14Receivers specially adapted for specific applications
    • GPHYSICS
    • G02OPTICS
    • G02CSPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C11/00Non-optical adjuncts; Attachment thereof
    • G02C11/10Electronic devices other than hearing aids
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/011Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/012Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • General Engineering & Computer Science (AREA)
  • Remote Sensing (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Acoustics & Sound (AREA)
  • Human Computer Interaction (AREA)
  • Otolaryngology (AREA)
  • Ophthalmology & Optometry (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)

Abstract

本发明公开了一种智能眼镜的交互控制方法、可读存储介质及智能眼镜,该方法包括:在每次使用时,通过内侧摄像头获取用户的虹膜信息,通过外侧摄像头获取用户的脸谱信息;根据脸谱信息进行分析以确认得到用户年龄数,根据虹膜信息以及脸谱信息创建用户唯一ID并进行存储以建成一本地数据库;判断用户年龄数是否超出预设年龄范围;若是,则将智能眼镜切换为监护状态以获取用户的监护信息进而对用户进行安全监测。本发明提出的智能眼镜的交互控制方法,能对特殊人群实现很好地监护作用,满足了实际应用需求。

Description

一种智能眼镜的交互控制方法、可读存储介质及智能眼镜
技术领域
本发明涉及智能眼镜技术领域,特别涉及一种智能眼镜的交互控制方法、可读存储介质及智能眼镜。
背景技术
随着信息技术的日益革新,传统的产品也在朝着功能集成化、执行智能化以及操作便利化的方向发展。例如,眼镜是人们日常非常常见的一个物件,近年来也在发生着以智能眼镜为主导的技术上的变革。
具体的,智能眼镜,也称智能镜,是指“像智能手机一样,具有独立的操作系统,智能眼镜可以由用户安装软件、游戏等软件服务商提供的程序。智能眼镜可通过语音或动作操控完成添加日程、地图导航、与好友互动、拍摄照片和视频、与朋友展开视频通话等功能,并可以通过移动通讯网络来实现无线网络接入的这样一类眼镜的总称。目前,大部分的智能眼镜大多集中在增强现实技术方面的应用。
然而,通过智能眼镜对特殊人群进行监护的应用则少之又少。且目前市面上较为缺乏对独居老人的日常进行监护的智能眼镜产品,无法很好地满足实际应用需求。
发明内容
为此,本发明是为了解决现有技术中,现有的智能眼镜无法对独居老人的日常进行较好监护的问题。
本发明提出一种智能眼镜的交互控制方法,其中,所述智能眼镜上至少安装有均与中央控制器电性连接的内侧摄像头、外侧摄像头、红外测距仪、红外测温仪、语音播报器、GPS定位仪、通讯模块以及存储器,所述方法包括如下步骤:
在每次使用时,通过所述内侧摄像头获取用户的虹膜信息,通过所述外侧摄像头获取用户的脸谱信息;
根据所述脸谱信息进行分析以确认得到用户年龄数,根据所述虹膜信息以及所述脸谱信息创建用户唯一ID并进行存储以建成一本地数据库;
判断所述用户年龄数是否超出预设年龄范围;
若是,则将所述智能眼镜切换为监护状态以获取用户的监护信息进而对用户进行安全监测,其中,所述监护信息至少包括用户的体温信息、前方障碍物距离以及GPS地理定位信息。
本发明提出的智能眼镜的交互控制方法,根据内侧摄像头获取用户的虹膜信息,根据外侧摄像头获取用户的脸谱信息,然后根据虹膜信息以及脸谱信息创建用户唯一ID并进行存储以建成一本地数据库。当判断到用户年龄数超出预设年龄范围,则确定该用户为重点监护对象,智能眼镜自动切换为监护状态,以对用户进行安全监测。本发明提出的智能眼镜的交互控制方法,能对特殊人群实现很好地监护作用,满足了实际应用需求。
所述智能眼镜的交互控制方法,其中,所述方法还包括:
当获取到当前用户的虹膜信息以及脸谱信息时,在所述本地数据库中查找是否存在所述当前用户对应的虹膜信息以及脸谱信息;
若否,则根据所述当前用户的虹膜信息以及脸谱信息创建得到所述用户唯一ID,并提示输入与所述用户唯一ID对应的用户基本信息,所述用户基本信息至少包括居家位置、指纹信息、声纹信息以及紧急呼叫号码。
所述智能眼镜的交互控制方法,其中,在所述智能眼镜上还设有一微型投射仪,所述居家位置的输入方法包括:
根据所述GPS定位仪获取到的地图信息,通过所述微型投射仪在平整墙面进行投射以得到一虚拟地图展板;
根据用户的凝视坐标在所述虚拟地图展板上进行移动以查找到对应的居家位置,并当接收到用户的确认指令之后,将所述居家位置写入到与所述用户唯一ID对应的用户基本信息中;
其中,所述确认指令的生成方式包括由检测到用户按动所述智能眼镜上的物理按键后生成,或当判断到所述凝视坐标在所述虚拟地图展板上某一点的静置停留时间超过预设停留时间时生成所述确认指令。
所述智能眼镜的交互控制方法,其中,在所述虚拟地图展板上设置有虚拟功能按钮,所述凝视坐标在所述虚拟地图展板上以有色光标的形式存在;
所述智能眼镜通过所述有色光标控制所述虚拟功能按钮以实现对应功能,其中所述虚拟功能按钮至少包括“放大”、“缩小”、“历史查找”以及“地址收藏”按钮。
所述智能眼镜的交互控制方法,其中,对用户进行监护时,用户的实时状态包括居家状态以及外出状态,在所述智能眼镜上还设有一高度计,所述居家位置还包括预存储的楼层高度值,所述方法还包括:
判断用户的当前位置是否与所述居家位置位于同一坐标点;
若是,则判断用户的当前楼层高度是否与所述预存储的楼层高度值相同;
若是,则通过所述外侧摄像头获取周围环境图像,根据所述红外测距仪确认得到平均障碍距离;
根据所述周围环境图像以及所述平均障碍距离判断用户是否处于居家状态。
所述智能眼镜的交互控制方法,其中,根据所述周围环境图像以及所述平均障碍距离判断用户是否处于居家状态的方法包括如下步骤:
对所述周围环境图像进行分析提取以得到多个特征元素图块,将多个所述特征元素图块在预设居家图块数据库中进行比对,以计算得到多个所述特征元素图块在所述预设居家图块数据库中对应的第一图块吻合率;
根据所述红外测距仪获取得到多个前方障碍物距离,并将多个所述前方障碍物距离进行均值处理以得到所述平均障碍距离;
当判断到所述第一图块吻合率大于预设吻合率,且所述平均障碍距离小于预设障碍距离,则确定用户处于居家状态。
所述智能眼镜的交互控制方法,其中,所述方法还包括:
判断用户的当前位置是否与所述居家位置位于同一坐标点;
若否,则判断用户的当前楼层高度是否与所述预存储的楼层高度值相同;
若否,则通过所述外侧摄像头获取周围环境图像,根据所述红外测距仪确认得到平均障碍距离;
根据所述周围环境图像以及所述平均障碍距离判断用户是否处于外出状态。
所述智能眼镜的交互控制方法,其中,根据所述周围环境图像以及所述平均障碍距离判断用户是否处于外出状态的方法包括如下步骤:
对所述周围环境图像进行分析提取以得到多个特征元素图块,将多个所述特征元素图块在预设户外图块数据库中进行比对,以计算得到多个所述特征元素图块在所述预设户外图块数据库中对应的第二图块吻合率;
根据所述红外测距仪获取得到多个前方障碍物距离,并将多个所述前方障碍物距离进行均值处理以得到所述平均障碍距离;
当判断到所述第二图块吻合率大于预设吻合率,且所述平均障碍距离大于预设障碍距离,则确定用户处于外出状态。
本发明还提出一种可读存储介质,其上存储有计算机程序,其中,所述程序被处理器执行时实现上述所述的智能眼镜的交互控制方法。
本发明还提出一种智能眼镜,包括眼镜本体以及与所述眼镜本体连接的镜架,其中,在眼镜本体的外侧两端分别设有一外侧摄像头,在眼镜本体的内侧设有两个内侧摄像头,在眼镜本体的外侧中部设有红外测距仪,在所述镜架的内侧设有红外测温仪,在眼镜本体的两端分别设有语音播报器,在眼镜本体的外侧中部设有微型投射仪,其中,所述智能眼镜执行如上所述的智能眼镜的交互控制方法。
本发明的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实施例了解到。
附图说明
本发明实施例的上述和/或附加的方面和优点从结合下面附图对实施例的描述中将变得明显和容易理解,其中:
图1为本发明第一实施例提出的智能眼镜的交互控制方法的流程图;
图2为本发明第一实施例提出的智能眼镜的结构示意图;
图3为本发明第一实施例提出的智能眼镜的内部控制原理图;
图4为本发明第二实施例提出的智能眼镜的交互控制方法的流程图;
图5为本发明第二实施例提出的智能眼镜的结构示意图;
图6为本发明第二实施例中虚拟地图展板的控制原理图;
图7为本发明第二实施例中虚拟地图展板的界面示意图;
图8为本发明第二实施例中智能眼镜的内部控制原理图;
图9为本发明第三实施例提出的智能眼镜的交互控制方法的流程图;
图10为本发明第三实施例中周围环境图像的处理原理图;
图11为本发明第四实施例提出的智能眼镜的交互控制方法的流程图;
图12为本发明第四实施例中周围环境图像的处理原理图;
图13为本发明第三实施例以及第四实施例中智能眼镜的内部控制原理图。
主要符号说明:
眼镜本体11,镜架12,外侧摄像头111,内侧摄像头112,红外测距仪113,语音播报器114,微型投射仪115,触控区116,红外测温仪121。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在现有技术中,通过智能眼镜对特殊人群进行监护的应用则少之又少。且目前市面上较为缺乏对独居老人的日常进行监护的智能眼镜产品,无法很好地满足实际应用需求。
实施例一
为了解决这一技术问题,请参阅图1至图3,本发明提出一种智能眼镜,请参阅2,对于本发明提出的智能眼镜,包括眼镜本体11以及与眼镜本体11连接的镜架12。
如图2所示,在眼镜本体11的外侧两端分别设有一外侧摄像头111,在眼镜本体11的内侧设有两个内侧摄像头112。在眼镜本体11的外侧中部设有红外测距仪113,在镜架12的内侧设有红外测温仪121,在眼镜本体11的两端分别设有语音播报器114。
在此需要指出的是,上述的外侧摄像头111用于获取周围环境图像,内侧摄像头112用于获取用户的脸谱信息。此外,红外测距仪113用于实时检测得到用户与障碍物之间的距离,红外测温仪121用于实时检测用户的体温。可以理解的,语音播报器114用于向用户发出提示语音。在此需要说明的是,语音播报器114还可以用于录入用户的输入语音,并传输至中央控制器中进行语音语义识别处理。
在本实施例中,对于上述的智能眼镜,在眼镜本体11的内部还设有GPS定位仪、中央控制器、通讯模块以及存储器。由于设置在眼镜本体11的内部,并未在图2中示出。
本发明第一实施例中的智能眼镜,其对应的控制原理可参阅图3。具体的,本实施例提出的智能眼镜,包括中央控制器,其中,中央控制器与内侧摄像头、外侧摄像头、红外测距仪、红外测温仪、语音播报器、GPS定位仪、通讯模块以及存储器电性连接。
具体的,对于上述的智能眼镜,请参阅图1,在本发明第一实施例提出的智能眼镜的交互控制方法中,所述方法包括如下步骤:
S101,在每次使用时,通过所述内侧摄像头获取用户的虹膜信息,通过所述外侧摄像头获取用户的脸谱信息。
对于上述的智能眼镜,在每次使用时,用户通过将智能能眼镜的内侧摄像头112摄录获取用户的虹膜信息,通过外侧摄像头111获取用户的脸谱信息。
S102,根据所述脸谱信息进行分析以确认得到用户年龄数,根据所述虹膜信息以及所述脸谱信息创建用户唯一ID并进行存储以建成一本地数据库。
如上所述,在获取得到了用户的虹膜信息以及用户的脸谱信息之后,根据脸谱信息中的面貌进行分析,以确定得到用户年龄数。可以理解的,在确定用户年龄时,是根据用户的脸部容貌特征,结合特定的识别算法以确定对应的用户年龄。
进一步的,由于用户的虹膜信息是独一无二的,根据虹膜信息创建用户唯一ID并进行存储。可以理解的,当智能眼镜有多个用户使用过之后,所有用户的相关信息均被存储至本地。
在此需要说明的是,对于用户唯一ID的生成方法,在本实施例中,用户唯一ID的生成格式为“注册日期+注册地英文缩写+虹膜信息提取码+性别+识别年龄+校验码”。其中,注册日期为6位,例如,注册日期为2021年4月2日,则用户唯一ID中注册日期的格式为“210402”。此外,由于智能眼镜上设有GPS定位仪,能实时获取所在的地理信息。例如,注册地为中国,则对应的注册地英文缩写为“CN”。
虹膜信息提取码为四位,根据提取程序由阿拉伯数字“0”至“9”,以及英文字母“A”至“Z”中的任意一个自由组合而成。在此需要指出的是,在实际应用中,可根据加密等级的要求,提高虹膜信息提取码的位数。此外,性别的赋值为1或2,其中1代表男性,2代表女性,可从脸谱信息中识别确认。进一步的,“识别年龄”为两位,同样根据脸谱信息中识别确认。校验码为三位,由系统自动生成。
例如,在本实施例中,某用户的唯一ID可表示为:210406CN83XF168031。其中,210406表示注册日期为2021年4月6日,CN表示注册地为中国,83XF为根据虹膜信息得到的提取码,1表示用户为男性,68表示所识别的用户年龄为68岁,031为系统自动生成的校验码。
在此需要补充说明的是,对于上述的用户唯一ID而言,需对应存储用户基本信息。其中,用户基本信息包括居家位置、指纹信息、声纹信息以及紧急呼叫号码。
S103,判断所述用户年龄数是否超出预设年龄范围。
在实际生活中,往往是一些年幼或年长的人,需要进行特殊的照顾。在本实施中,预设年龄范围为12~55岁。当判断到当前用户的年龄数超出预设年龄范围,例如,当前用户的年龄为65岁,则超出了上述的预设年龄范围。
S104,若是,则将所述智能眼镜切换为监护状态以获取用户的监护信息进而对用户进行安全监测,其中,所述监护信息至少包括用户的体温信息、前方障碍物距离以及GPS地理定位信息。
进一步的,若当前用户的年龄数在预设年龄范围内,则智能眼镜处于正常模式(低功耗模式);若当前用户的年龄数超出预设年龄范围,则智能眼镜切换为监护状态。具体的,当智能眼镜处于监护状态时,需要获取用户的体温信息、前方障碍物距离以及GPS地理定位信息。
可以理解的,获取用户的体温信息,可实时对用户的健康进行监测。若用户的体温不正常时,则通过通讯模块向绑定的用户的家属手机号发送提示短信以及时告知。此外,通过获取前方障碍物距离,便于实时提醒用户(特别是存在视觉障碍,例如罹患白内障的老年用户)周围的环境状态。若监测到用户与障碍物之间的距离小于安全距离,存在碰撞的危险时,则生成一警示信息,并通过语音播报器114进行播报以提醒用户。可以理解的,所获取的GPS地理定位信息,便于对用户的实时位置进行定位与追踪。
本发明提出的智能眼镜的交互控制方法,根据内侧摄像头获取用户的虹膜信息,根据外侧摄像头获取用户的脸谱信息,然后根据虹膜信息以及脸谱信息创建用户唯一ID并进行存储以建成一本地数据库。当判断到用户年龄数超出预设年龄范围,则确定该用户为重点监护对象,智能眼镜自动切换为监护状态,以对用户进行安全监测。本发明提出的智能眼镜的交互控制方法,能对特殊人群实现很好地监护作用,满足了实际应用需求。
实施例二
请参阅图4至图8,对于本发明第二实施例提出的智能眼镜,其主体结构与上述第一实施例中的基本相同,其区别在于:在眼镜本体11的外侧中部设有微型投射仪115,在眼镜本体11的外侧一端还设有触控区116。可以理解的,设置的微型投射仪115用于在前方的平整墙面投射出目标图像,设置的触控区116主要用于接收用户的触控信息,以实现虚拟现实交互。
本发明第二实施例中的智能眼镜,其对应的控制原理可参阅图8。具体的,本实施例提出的智能眼镜,包括中央控制器,其中,中央控制器与内侧摄像头、外侧摄像头、红外测距仪、红外测温仪、语音播报器、GPS定位仪、通讯模块、存储器以及微型投射仪电性连接。
对于本实施例提出的智能眼镜,对应的交互控制方法具体包括如下步骤:
S201,获取到当前用户的虹膜信息以及脸谱信息。
本步骤与上述第一实施例中的步骤S101相同,在此不再赘述。
S202,在本地数据库中查找是否存在当前用户对应的虹膜信息以及脸谱信息。
S203,若否,则根据当前用户的虹膜信息以及脸谱信息创建得到用户唯一ID。
如上所述,若在该智能眼镜的存储器中未查找到当前用户的虹膜信息以及脸谱信息,则需要进行新建档案进行存储。也即根据上述虹膜信息以及脸谱信息创建得到用户唯一ID。其中,用户唯一ID的创建方法,与上述第一实施例中的相同。
S204,提示输入与用户唯一ID对应的用户基本信息,用户基本信息至少包括居家位置、指纹信息、声纹信息以及紧急呼叫号码。
可以理解的,每个用户唯一ID均需要输入存储对应的用户基本信息。在本实施例中,用户基本信息包括居家位置、指纹信息、声纹信息以及紧急呼叫号码。
在此需要补充说明的是,用户在正常使用过智能眼镜一次之后,由于在上次的使用过程中输入了指纹信息以及声纹信息,因此在下次开机使用时,可选择通过指纹信息或声纹信息的方式验证解锁使用,也可以通过传统的验证用户的虹膜信息以及脸谱信息的方式进行解锁使用,具体以用户的使用习惯以及便捷程度为准。
对于上述的居家位置,其输入方法具体包括如下步骤:
S2041,根据GPS定位仪获取到的地图信息,通过微型投射仪在平整墙面进行投射以得到一虚拟地图展板。
由于在智能眼镜中设置有GPS定位仪,通过GPS定位仪所获取到的地图信息,通过微型投射仪在平整墙面进行投射以得到一虚拟地图展板。
对虚拟地图展板而言,如图7所示,虚拟地图展板包括位于中部的地图显示区域,在虚拟地图展板内存在一有色光标。在地图显示区域的侧缘分别设有第一功能区、第二功能区以及第三功能区。
其中,第一功能区内包括“国家(下拉选项)”、“城市(下拉选项)”、“县区(下拉选项)”、“街道(下拉选项)”以及文字显示区。在实际虚拟触控过程中,用户可通过控制有色光标,通过上述各下拉选项进行国家、城市、县区以及街道的选择。文字显示区能实时显示当前所选定的位置的具体位置信息。
第二功能区内设有“放大按钮”、“缩小按钮”、“历史查找按钮”以及“地址收藏按钮”。可以理解的,当需要查找更小的地点时,需要用户通过点击“放大按钮”,然后对应移动有色光标进行查找。
此外,第三功能区内设有“虚拟触控键”。在此需要说明的是,对“虚拟触控键”的操作,是用户通过设置在眼镜本体11上的触控区116来完成的。也即,用户通过对触控区116的操作,以实现对虚拟触控键中的上下左右各方向的控制操作。再结合上述的“放大按钮”以及“缩小按钮”,以保证有色光标能移动到任意一个目标定位点。
在本实施例中,为了操作的简便,系统直接设置为:通过GPS定位仪所获取的用户的当前位置,结合地图信息直接投射在墙面上。作为其中一种优选调节方式,若定位存在一定误差,用户也可通过上述的触控区116控制“虚拟触控键”,以实现位置的微调。
S2042,根据用户的凝视坐标在虚拟地图展板上进行移动以查找到对应的居家位置。
在本实施例中,若需要将有色光标移动到目标位置,可通过确定用户的凝视坐标来实现。具体的,设于智能眼镜的内侧摄像头112捕捉用户的凝视坐标,凝视坐标在虚拟地图展板上以有色光标的形式存在。其中,凝视坐标在合理范围内随着用户的瞳孔中心进行移动,以最终查找到对应的居家位置。
S2043,当接收到用户的确认指令之后,将居家位置写入到与用户唯一ID对应的用户基本信息中。
在确定了正确的居家位置之后,若智能眼镜接收到用户的确认指令,则将居家位置写入到与所述用户唯一ID对应的用户基本信息中。
其中,确认指令的生成方式包括有多种。例如,由检测到用户按动智能眼镜上的触控区116生成,通过单击或双击的方式生成确认信号。再例如,可当判断到凝视坐标在虚拟地图展板上某一点的静置停留时间超过预设停留时间时以生成确认指令。
例如,当用户通过瞳孔将有色光标移动至合适的位置时,也即此时凝视坐标到达指定位置,此时若凝视坐标在虚拟地图展板上的静置停留时间超过预设停留时间10s,则系统自动生成确认指令,以将对应的居家位置写入到与用户唯一ID对应的用户基本信息中。
实施例三
为了更精确地定位用户的具体位置,以确定用户处于居家状态或外出状态,
本发明第三实施例提出一种智能眼镜,在本实施例中,智能眼镜与上述第二实施例中的智能眼镜的结构几乎相同,其区别仅在于:在智能眼镜上还设有一高度计。其中,高度计用于实时测量用户的高度,以确定用户当前所处的楼层高度。此外,居家位置还包括预存储的楼层高度值。
本实施例中的智能眼镜,其对应的控制原理可参阅图13。具体的,本实施例提出的智能眼镜,包括中央控制器,其中,中央控制器与内侧摄像头、外侧摄像头、红外测距仪、红外测温仪、语音播报器、GPS定位仪、通讯模块、存储器、微型投射仪以及高度计电性连接。
请参阅图9、图10以及图13,本发明第三实施例提出的智能眼镜的交互控制方法,具体包括如下步骤:
S301,开始。
S302,判断用户的当前位置是否与居家位置位于同一坐标点。
可以理解的,本步骤是确定用户处于居家状态或外出状态的必要步骤。
S303,用户的当前楼层高度是否与预存储的楼层高度值相同。
若用户的当前位置是否与居家位置位于同一坐标点,还不能直接确定用户就处于居家状态,有可能在本栋建筑内的其它楼层。因此还需判断当前楼层高度与预存储的楼层高度值是否相同。
S304,通过外侧摄像头获取周围环境图像,根据红外测距仪确认得到平均障碍距离。
进一步的,若用户的当前位置与居家位置位于同一坐标点,且用户的当前楼层高度与预存储的楼层高度值相同,此两个条件满足了用户处于居家状态的必要条件。为了得到更加精准的判定结论,在本步骤中,还需要通过外侧摄像头获取周围环境图像,并根据红外测距仪确认得到平均障碍距离。
可以理解的,通过红外测距仪获取得到多个障碍距离,并进行均值处理以得到平均障碍距离。
S305,根据周围环境图像以及平均障碍距离判断用户是否处于居家状态。
具体的,在本步骤中,对于所获取的周围环境图像,其对应的处理方法包括如下步骤:
S3051,对周围环境图像进行分析提取以得到多个特征元素图块。
在本步骤中,通过智能眼镜上的外侧摄像头对周围环境进行摄像,然后通过控制器对所得到的周围环境图像进行分析提取,以得到多个特征元素图块。具体的,在对周围环境图像进行分析时,会对图像中所包含的常见物品进行特征化处理,例如,若获取的周围环境图像中存在“台灯”、“热水壶”、“书架”等此类常见物品时,在进行处理时会对应进行特征化提取,以得到对应的特征元素图块。可以理解的,每个特征元素图块都对应有一个特定的物品名称或物品主题。
S3052,将多个特征元素图块在预设居家图块数据库中进行比对,以计算得到多个特征元素图块在预设居家图块数据库中对应的第一图块吻合率。
进一步的,在得到了多个代表物品名称的特征元素图块之后,将多个特征元素图块在预设居家图块数据库中进行比对,以计算得到多个特征元素图块在预设居家图块数据库中对应的第一图块吻合率。
在此需要说明的,对于预设的居家图块数据库,在居家图块数据库中预先存储了多个居家场景下常见的物品。在本步骤中,计算多个特征元素图块在预设居家图块数据库中对应的第一图块吻合率。
S3053,第一图块吻合率是否大于预设吻合率。
例如,通过周围环境图像提取得到的多个特征元素图块在预设居家图块数据库中对应的第一图块吻合率为90%,预设吻合率为85%,则从图块吻合率的角度可判定用户处于居家状态。
S3054,根据红外测距仪获取得到多个前方障碍物距离。
S3055,将多个前方障碍物距离进行均值处理以得到平均障碍距离。
S3056,平均障碍距离是否小于预设障碍距离。
可以理解的,若用户处于居家状态时,用户周围环境为房间的墙壁或家具。与障碍物之间的距离一般较小。
S3057,若是,确认用户处于居家状态。
在本步骤中,若判断到上述的第一图块吻合率大于预设吻合率,且平均障碍距离小于预设障碍距离,则可判定用户处于居家状态。
在本实施例中,通过同时结合居家位置、楼层高度值、图块吻合率以及平均障碍物距离等四项参数,综合判断用户处于居家状态或外出状态,提高了判断的准确度,为监护状态的准确切换提供了保证。
实施例四
本实施例中的智能眼镜,其对应的控制原理可参阅图13。具体的,本实施例提出的智能眼镜,包括中央控制器,其中,中央控制器与内侧摄像头、外侧摄像头、红外测距仪、红外测温仪、语音播报器、GPS定位仪、通讯模块、存储器、微型投射仪以及高度计电性连接。
请参阅图11与图12,本发明第四实施例提出的智能眼镜的交互控制方法,具体包括如下步骤:
S401,开始。
S402,判断用户的当前位置是否与居家位置位于同一坐标点。
可以理解的,本步骤是确定用户处于居家状态或外出状态的必要步骤。
S403,若否,则判断用户的当前楼层高度是否与预存储的楼层高度值相同。
可以理解的,用户的当前楼层高度与预存储的楼层高度值不相同,是用户处于外出状态的必要条件。
S404,若否,则通过外侧摄像头获取周围环境图像,根据红外测距仪确认得到平均障碍距离。
S405,根据周围环境图像以及平均障碍距离判断用户是否处于外出状态。
具体的,在本步骤中,对于所获取的周围环境图像,其对应的处理方法包括如下步骤:
S4051,对周围环境图像进行分析提取以得到多个特征元素图块。
S4052,将多个特征元素图块在预设户外图块数据库中进行比对,以计算得到多个特征元素图块在预设户外图块数据库中对应的第二图块吻合率。
在本步骤中,通过智能眼镜上的外侧摄像头对周围环境进行摄像,然后通过控制器对所得到的周围环境图像进行分析提取,以得到多个特征元素图块。具体的,在对周围环境图像进行分析时,会对图像中所包含的常见物品进行特征化处理,例如,若获取的周围环境图像中存在“岗亭”、“奶茶店”、“斑马线”等此类常见的户外标志时,在进行处理时会对应进行特征化提取,以得到对应的特征元素图块。可以理解的,每个特征元素图块都对应有一个特定的物品名称或物品主题。
S4053,第二图块吻合率是否大于预设吻合率。
进一步的,在得到了多个代表物体名称的特征元素图块之后,将多个特征元素图块在预设户外图块数据库中进行比对,以计算得到多个特征元素图块在预设户外图块数据库中对应的第一图块吻合率。
S4054,根据红外测距仪获取得到多个前方障碍物距离。
S4055,将多个前方障碍物距离进行均值处理以得到平均障碍距离。
S4056,平均障碍距离是否大于预设障碍距离。
可以理解的,若用户处于外出状态时,用户周围环境一般较为开阔,因此与障碍物之间的距离一般较大。
S4057,若是,则确认用户处于外出状态。
在本步骤中,若判断到上述的第二图块吻合率大于预设吻合率,且平均障碍距离大于预设障碍距离,则可判定用户处于外出状态。
在本实施例中,通过同时结合居家位置、楼层高度值、图块吻合率以及平均障碍物距离等四项参数,综合判断用户处于居家状态或外出状态,提高了判断的准确度,为监护状态的准确切换提供了保证。
本发明还提出一种可读存储介质,其上存储有计算机程序,其中,所述程序被处理器执行时实现上述所述的智能眼镜的交互控制方法。
本发明还提出一种智能眼镜,包括智能眼镜本体以及可读存储介质,所述可读存储介质上存储有计算机程序,其中,所述程序被处理器执行时实现如上所述的智能眼镜的交互控制方法。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,“计算机可读介质”可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。
计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、 “示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管已经示出和描述了本发明的实施例,本领域的普通技术人员可以理解:在不脱离本发明的原理和宗旨的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由权利要求及其等同物限定。

Claims (4)

1.一种智能眼镜的交互控制方法,其特征在于,所述智能眼镜上至少安装有均与中央控制器电性连接的内侧摄像头、外侧摄像头、红外测距仪、红外测温仪、语音播报器、GPS定位仪、通讯模块以及存储器,所述方法包括如下步骤:
在每次使用时,通过所述内侧摄像头获取用户的虹膜信息,通过所述外侧摄像头获取用户的脸谱信息;
根据所述脸谱信息进行分析以确认得到用户年龄数,根据所述虹膜信息以及所述脸谱信息创建用户唯一ID并进行存储以建成一本地数据库;
判断所述用户年龄数是否超出预设年龄范围;
若是,则将所述智能眼镜切换为监护状态以获取用户的监护信息进而对用户进行安全监测,其中,所述监护信息至少包括用户的体温信息、前方障碍物距离以及GPS地理定位信息;
在所述智能眼镜上还设有一微型投射仪,居家位置的输入方法包括:
根据所述GPS定位仪获取到的地图信息,通过所述微型投射仪在平整墙面进行投射以得到一虚拟地图展板;
根据用户的凝视坐标在所述虚拟地图展板上进行移动以查找到对应的居家位置,并当接收到用户的确认指令之后,将所述居家位置写入到与所述用户唯一ID对应的用户基本信息中;
其中,所述确认指令的生成方式包括由检测到用户按动所述智能眼镜上的物理按键后生成,或当判断到所述凝视坐标在所述虚拟地图展板上某一点的静置停留时间超过预设停留时间时生成所述确认指令;
在所述虚拟地图展板上设置有虚拟功能按钮,所述凝视坐标在所述虚拟地图展板上以有色光标的形式存在;
所述智能眼镜通过所述有色光标控制所述虚拟功能按钮以实现对应功能,其中所述虚拟功能按钮至少包括“放大”、“缩小”、“历史查找”以及“地址收藏”按钮;
对用户进行监护时,用户的实时状态包括居家状态以及外出状态,在所述智能眼镜上还设有一高度计,所述居家位置还包括预存储的楼层高度值,所述方法还包括:
判断用户的当前位置是否与所述居家位置位于同一坐标点;
若是,则判断用户的当前楼层高度是否与所述预存储的楼层高度值相同;
若是,则通过所述外侧摄像头获取周围环境图像,根据所述红外测距仪确认得到平均障碍距离;
根据所述周围环境图像以及所述平均障碍距离判断用户处于居家状态或外出状态;
其中,判断用户处于居家状态的方法包括:
对所述周围环境图像进行分析提取以得到多个特征元素图块,将多个所述特征元素图块在预设居家图块数据库中进行比对,以计算得到多个所述特征元素图块在所述预设居家图块数据库中对应的第一图块吻合率;
根据所述红外测距仪获取得到多个前方障碍物距离,并将多个所述前方障碍物距离进行均值处理以得到所述平均障碍距离;
当判断到所述第一图块吻合率大于预设吻合率,且所述平均障碍距离小于预设障碍距离,则确定用户处于居家状态;
其中,判断用户处于外出状态的方法包括:
对所述周围环境图像进行分析提取以得到多个特征元素图块,将多个所述特征元素图块在预设户外图块数据库中进行比对,以计算得到多个所述特征元素图块在所述预设户外图块数据库中对应的第二图块吻合率;
根据所述红外测距仪获取得到多个前方障碍物距离,并将多个所述前方障碍物距离进行均值处理以得到所述平均障碍距离;
当判断到所述第二图块吻合率大于预设吻合率,且所述平均障碍距离大于预设障碍距离,则确定用户处于外出状态。
2.根据权利要求1所述的智能眼镜的交互控制方法,其特征在于,所述方法还包括:
当获取到当前用户的虹膜信息以及脸谱信息时,在所述本地数据库中查找是否存在所述当前用户对应的虹膜信息以及脸谱信息;
若否,则根据所述当前用户的虹膜信息以及脸谱信息创建得到所述用户唯一ID,并提示输入与所述用户唯一ID对应的用户基本信息,所述用户基本信息至少包括居家位置、指纹信息、声纹信息以及紧急呼叫号码。
3.一种可读存储介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现上述权利要求1或2所述的智能眼镜的交互控制方法。
4.一种智能眼镜,包括眼镜本体以及与所述眼镜本体连接的镜架,其特征在于,在眼镜本体的外侧两端分别设有一外侧摄像头,在眼镜本体的内侧设有两个内侧摄像头,在眼镜本体的外侧中部设有红外测距仪,在所述镜架的内侧设有红外测温仪,在眼镜本体的两端分别设有语音播报器,在眼镜本体的外侧中部设有微型投射仪,所述智能眼镜执行如上述权利要求1或2所述的智能眼镜的交互控制方法。
CN202110431001.1A 2021-04-21 2021-04-21 一种智能眼镜的交互控制方法、可读存储介质及智能眼镜 Active CN112835454B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110431001.1A CN112835454B (zh) 2021-04-21 2021-04-21 一种智能眼镜的交互控制方法、可读存储介质及智能眼镜

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110431001.1A CN112835454B (zh) 2021-04-21 2021-04-21 一种智能眼镜的交互控制方法、可读存储介质及智能眼镜

Publications (2)

Publication Number Publication Date
CN112835454A CN112835454A (zh) 2021-05-25
CN112835454B true CN112835454B (zh) 2021-07-06

Family

ID=75929809

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110431001.1A Active CN112835454B (zh) 2021-04-21 2021-04-21 一种智能眼镜的交互控制方法、可读存储介质及智能眼镜

Country Status (1)

Country Link
CN (1) CN112835454B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113380050B (zh) * 2021-08-12 2021-11-12 江西影创信息产业有限公司 基于智能眼镜的行驶安全提示方法、系统及智能眼镜

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108489484A (zh) * 2018-03-12 2018-09-04 中国电子科技集团公司第二十八研究所 一种基于单兵智能可视眼镜的记忆路径导航方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130278631A1 (en) * 2010-02-28 2013-10-24 Osterhout Group, Inc. 3d positioning of augmented reality information
BR102012012196A2 (pt) * 2012-05-22 2014-04-15 Dourado Lopes Neto Joviniano Óculos inteligente para portadores de necessidades especiais
CN205334537U (zh) * 2015-12-31 2016-06-22 北京上古视觉科技有限公司 一种具有人脸、虹膜识别功能的系统及智能眼镜
CN206684900U (zh) * 2017-02-24 2017-11-28 武汉日创科技有限公司 一种老人用智能眼镜框架
CN107463823A (zh) * 2017-07-31 2017-12-12 广东欧珀移动通信有限公司 移动终端及应用控制方法、计算机可读存储介质
US10706281B2 (en) * 2018-08-10 2020-07-07 Microsoft Technology Licensing, Llc Controlling focal parameters of a head mounted display based on estimated user age
CN109471263A (zh) * 2018-11-30 2019-03-15 郭志猛 一种步态识别智能眼镜
CN111797249A (zh) * 2019-04-09 2020-10-20 华为技术有限公司 一种内容推送方法、装置与设备

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108489484A (zh) * 2018-03-12 2018-09-04 中国电子科技集团公司第二十八研究所 一种基于单兵智能可视眼镜的记忆路径导航方法

Also Published As

Publication number Publication date
CN112835454A (zh) 2021-05-25

Similar Documents

Publication Publication Date Title
KR102362117B1 (ko) 지도 정보를 제공하기 위한 전자 장치
EP2455713B1 (en) Building directory aided navigation
US6766245B2 (en) Landmark-based location of users
EP3675084A1 (en) Map display method, apparatus, storage medium and terminal
JP5869558B2 (ja) 表示制御装置、集積回路、表示制御方法およびプログラム
US20190086214A1 (en) Image processing device, image processing method, and program
KR20190030140A (ko) 시선 추적 방법 및 이를 수행하기 위한 사용자 단말
CN105074691A (zh) 上下文感知定位、映射和跟踪
EP3125164A1 (en) Method and device for presenting ticket information
US9020918B2 (en) Information registration device, information registration method, information registration system, information presentation device, informaton presentation method, informaton presentaton system, and program
CN112835454B (zh) 一种智能眼镜的交互控制方法、可读存储介质及智能眼镜
CN109558895A (zh) 一种基于智能感知的校园管理方法、系统及介质
JP7287950B2 (ja) 通信方法、通信装置、およびプログラム
US10299982B2 (en) Systems and methods for blind and visually impaired person environment navigation assistance
CN112566020A (zh) 园林游玩导航系统
JP2010114544A (ja) インターホンシステム、来訪者受付プログラムおよび来訪者受付方法
JP6632824B2 (ja) 対象者誘導システム
CN111611812A (zh) 翻译成盲文
CN113079703A (zh) 使用图像传感器查询地理参考信息的真实世界
CN113724454B (zh) 移动设备的互动方法、移动设备、装置及存储介质
JP2013004001A (ja) 表示制御装置、表示制御方法、およびプログラム
CN102713948A (zh) 便携式终端、活动历史描写方法及活动历史描写系统
CN111033606A (zh) 信息处理装置、信息处理方法和程序
KR101914471B1 (ko) 스마트폰과 연동되는 가상현실 기반 정보안내 단말 시스템 및 그 제어 방법
JP6077930B2 (ja) 情報管理装置、情報管理システム、通信端末および情報管理方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20240326

Address after: Room 1301-1303, 13th Floor, Commercial Office Building 1 #, Greenland Expo City, No. 1388 Jiulonghu Avenue, Honggutan District, Nanchang City, Jiangxi Province, 330038

Patentee after: Nanchang small walnut Technology Co.,Ltd.

Country or region after: China

Address before: Room 1814, Commercial Office Building 1 #, Greenland Expo City, No. 1388 Jiulonghu Avenue, Honggutan District, Nanchang City, Jiangxi Province, 330038

Patentee before: Jiangxi Yingchuang Information Industry Co.,Ltd.

Country or region before: China