CN114077302A - 一种智能眼镜及其交互方法和交互装置 - Google Patents
一种智能眼镜及其交互方法和交互装置 Download PDFInfo
- Publication number
- CN114077302A CN114077302A CN202010849479.1A CN202010849479A CN114077302A CN 114077302 A CN114077302 A CN 114077302A CN 202010849479 A CN202010849479 A CN 202010849479A CN 114077302 A CN114077302 A CN 114077302A
- Authority
- CN
- China
- Prior art keywords
- angle
- intelligent glasses
- glasses
- user
- head
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 239000011521 glass Substances 0.000 title claims abstract description 157
- 230000003993 interaction Effects 0.000 title claims abstract description 108
- 238000000034 method Methods 0.000 title claims abstract description 81
- 238000004891 communication Methods 0.000 claims abstract description 12
- 239000004984 smart glass Substances 0.000 claims description 168
- 238000004590 computer program Methods 0.000 claims description 12
- 238000005259 measurement Methods 0.000 claims description 12
- 230000002618 waking effect Effects 0.000 claims description 10
- 230000004397 blinking Effects 0.000 claims description 6
- 230000002452 interceptive effect Effects 0.000 claims description 6
- 238000001514 detection method Methods 0.000 claims description 4
- 210000003128 head Anatomy 0.000 description 142
- 238000010586 diagram Methods 0.000 description 14
- 230000009471 action Effects 0.000 description 9
- 230000008569 process Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 4
- 230000003190 augmentative effect Effects 0.000 description 3
- 230000004927 fusion Effects 0.000 description 3
- 238000013507 mapping Methods 0.000 description 3
- 206010039203 Road traffic accident Diseases 0.000 description 2
- 230000006378 damage Effects 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000005094 computer simulation Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005562 fading Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000007306 turnover Effects 0.000 description 1
- 235000013311 vegetables Nutrition 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/163—Wearable computers, e.g. on a belt
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
- G06F1/3231—Monitoring the presence, absence or movement of users
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Optics & Photonics (AREA)
- Computer Hardware Design (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请实施例涉及一种智能眼镜及其交互方法和交互装置,该交互方法包括:接收通信设备发送的消息;在智能眼镜的显示区域的边缘显示消息的提示标识;在设定时间内测量佩戴智能眼镜的用户的头部沿第一方向转动后的第一角度,其中,第一角度为智能眼镜转动后的当前位置与初始位置之间沿第一方向的角度,初始位置为用户平视时智能眼镜所处的位置;判断第一角度是否大于或等于第一阈值;若判断结果为是,则进行滑屏或翻页操作以在显示区域显示消息展开后的详细内容;若判断结果为否,则提示标识消失。本申请中,可让用户在不使用双手的情况下与智能眼镜进行交互/操控智能眼镜显示消息/应用信息,操作简单方便,大大提升了用户体验。
Description
技术领域
本申请涉及增强现实技术领域,尤其涉及一种智能眼镜及其交互方法和交互装置。
背景技术
增强现实(Augmented Reality,简称AR),是一种将真实世界信息和虚拟世界信息“无缝”集成的新技术,是把原本在现实世界的一定时间空间范围内很难体验到的实体信息,通过电脑等科学技术,模拟仿真后再叠加,将虚拟的信息应用到真实世界,被人类感官所感知,从而达到超越现实的感官体验。真实的环境和虚拟的物体实时地叠加到了同一个画面或空间。
其中,具有较大的视场角、同步定位与地图构建(Simultaneous localizationand mapping,SLAM)等的AR头显,可将虚拟的数字内容放置在真实世界的不同位置,用户在移动或转动头部的时候数字内容和真实世界的相对位置不变,可给用户很好的虚实融合体验,但这类产品的体积、重量较大,功耗很高,不能满足长时间佩戴的要求。而对于不带有SLAM且视场角较小的AR头显如智能眼镜,显示内容会固定在用户的视场中且会跟随用户头部移动,存在数字内容遮挡用户观察真实世界的视线的问题,在用户驾驶车辆期间或者经过马路的情况下,这种视线遮蔽会增大发生交通事故的风险。
因此,对于不带有SLAM的AR头显来说,如何在显示虚拟数字内容的同时尽量不遮挡用户观察真实世界的视线,是一个亟待解决的问题。同时,智能眼镜大多没有外接的电源,为了延长续航时间,大部分时间智能眼镜处于休眠模式,如何采用简单方便的交互方式唤醒眼镜,提升用户体验,也是目前智能眼镜领域亟待解决的问题。
发明内容
本申请实施例提供了一种智能眼镜及其交互方法和交互装置,可让用户在不使用双手的情况下与智能眼镜进行交互,唤醒智能眼镜,操控智能眼镜显示消息或应用信息,操作简单方便,大大提升了用户体验。
第一方面,本申请实施例提供一种智能眼镜的交互方法,所述交互方法包括:接收通信设备发送的消息;在智能眼镜的显示区域的边缘显示所述消息的提示标识;在设定时间内测量佩戴所述智能眼镜的用户的头部沿第一方向转动后的第一角度,其中,所述第一角度为所述智能眼镜转动后的当前位置与初始位置之间沿所述第一方向的角度,所述初始位置为所述用户平视时所述智能眼镜所处的位置;判断所述第一角度是否大于或等于第一阈值;若判断结果为是,则进行滑屏或翻页操作以在所述显示区域显示所述消息展开后的详细内容;若判断结果为否,则所述提示标识消失。
在上述方案中,当眼镜接收到消息后,仅显示消息的提示标识如图标,用户可选择沿第一方向转动如做低头动作来查看信息的详细内容,或不做任何动作,一段时间后提示标识消失,这样用户可灵活选择查看或不查看详细内容的时间。也就是说,智能眼镜接收到消息后不会直接将详细内容推送到显示区域,而是仅显示消息的提示标识,这样不会因为将整条信息直接推送至用户眼前的显示区域而遮挡用户观察真实世界的视线,用户视线不会被过分遮挡,不会占用用户较多注意力,接着,通过简单的转头动作即可查看详细内容,在方便用户的同时避免了因用户的视线被遮挡而发生危险的问题。通过测量用户头部的转动来控制智能眼镜进行滑屏或翻页,其中,画面切换的方式可以有但不限于采用淡入淡出、旋转、百叶窗等方式,能够让用户在不使用双手的情况下与智能眼镜进行交互,,操作简单方便,大大提升了用户体验。
在一种可能的实现方式中,所述提示标识为图标或文字。
也就是说,在该实现方式中,智能眼镜接收通信设备发送的消息后,会在智能眼镜的显示区域的边缘显示消息的图标,例如微信图标、短信图标和未接来电图标等,能够使用户快速获知收到了哪些消息或信息,并且图标不会占用用户较多注意力,不会遮挡用户视线,从而降低了发生危险事件的概率。或者,图标也可替换为文字。
在一种可能的实现方式中,所述交互方法还包括:在所述智能眼镜处于休眠模式且接收所述消息时唤醒所述智能眼镜;和/或,在判断所述第一角度小于所述第一阈值时,所述智能眼镜进入休眠模式。
也就是说,在该实现方式中,对于处于休眠模式的智能眼镜,当接收到消息时,若第一角度大于或等于第一阈值,则能够唤醒智能眼镜并在智能眼镜的显示区域的边缘显示消息的提示标识。接着,若用户转动头部,使得第一角度小于第一阈值,则提示标识会在显示区域消失,另外,智能眼镜可进入休眠模式,这样能够让用户在不使用双手的情况下唤醒智能眼镜并与智能眼镜进行交互,操作简单方便,大大提升了用户体验。
在一种可能的实现方式中,所述交互方法还包括:当所述消息的详细内容在所述显示区域未完全显示时,使所述消息的详细内容沿第二方向做滑屏或翻页操作,以在所述显示区域显示所述详细内容的未显示部分。
也就是说,在该实现方式中,当消息的详细内容较长时,在用户头部沿第一方向如向下转动后,若第一角度大于或等于第一阈值,会在显示区域显示消息展开后的详细内容的部分,并且可自动使消息的详细内容沿第二方向如向上做滑屏或翻页操作,以显示详细内容的剩余的未显示部分。
在一种可能的实现方式中,所述交互方法还包括:当所述消息的详细内容在所述显示区域未完全显示时,测量用户头部沿第三方向转动后的第二角度,其中,所述第二角度为所述智能眼镜转动后的当前位置与所述初始位置之间沿所述第三方向的角度;判断所述第二角度是否大于或等于第二阈值;若判断结果为是,使所述消息的详细内容沿所述第三方向做滑屏或翻页操作,以在所述显示区域显示所述详细内容的未显示部分。
也就是说,在该实现方式中,当消息的详细内容较长时,在用户头部沿第一方向如向下转动后,若第一角度大于或等于第一阈值,会在显示区域显示消息展开后的详细内容的部分。接着,若用户头部沿第三方向如向左/向右转头且转动后的第二角度大于或等于第二阈值,可使消息的详细内容向左做滑屏或翻页操作,以显示详细内容的剩余的未显示部分。上述情况中,用户头部的转动方向与滑屏或翻页的方向一致。可以理解的是,用户头部的转动方向也可与滑屏或翻页的方向不一致。例如用户头部向左转动,使消息的详细内容向右滑屏或翻页。
第二方面,本申请实施例提供一种智能眼镜的交互方法,所述交互方法包括:在智能眼镜处于休眠模式时测量用户头部沿第一方向转动后的第一角度,其中,所述第一角度为所述智能眼镜转动后的当前位置与初始位置之间沿第一方向的角度,所述初始位置为所述用户平视时所述智能眼镜所处的位置,所述智能眼镜在所述初始位置处于休眠模式;判断所述第一角度是否大于或等于第一阈值;若判断结果为是,将所述智能眼镜的显示屏幕唤醒。
在上述方案中,通过用户头部沿第一方向的转动如向上抬头来唤醒眼镜,能够让用户在不使用双手的情况下唤醒智能眼镜,以便与智能眼镜进行交互,操作简单方便,大大提升了用户体验。
在一种可能的实现方式中,所述交互方法还包括:在唤醒所述智能眼镜的同时在所述智能眼镜的显示区域显示相应的第一应用信息,其中,所述第一应用信息是预先设置的。
也就是说,在该实现方式中,对于处于休眠模式的智能眼镜,当用户头部沿第一方向转动时,可以唤醒智能眼镜,并且在智能眼镜的显示区域可显示应用信息,如时间和/或天气。另外,可根据需要预先设置唤醒智能眼镜时显示区域内显示的应用信息的类型。
在一种可能的实现方式中,所述交互方法还包括:当所述智能眼镜处于唤醒模式时测量用户头部沿第二方向转动后的所述第一角度,其中,所述第二方向与所述第一方向相反;判断所述第一角度是否小于第一阈值;若判断结果为是,则使所述智能眼镜进入所述休眠模式。
也就是说,在该实现方式中,对于处于唤醒模式的智能眼镜,当需要使其进入休眠模式时,可以使用户头部沿与第一方向相反的第二方向如向下转动,以使第一角度小于第一阈值,从而使智能眼镜进入所述休眠模式。这样能够让用户在不使用双手的情况下使智能眼镜进入休眠模式,操作方便简单。
在一种可能的实现方式中,所述交互方法还包括:关闭所述智能眼镜,以在转头使所述第一角度大于或等于所述第一阈值时不唤醒所述智能眼镜。
也就是说,在该实现方式中,当不需要唤醒智能眼镜,可提前关闭智能眼镜,这样用户在转头例如抬头而使第一角度大于或等于第一阈值时不会唤醒智能眼镜。
在一种可能的实现方式中,所述交互方法还包括:在所述智能眼镜处于唤醒模式时测量所述用户头部沿第三方向转动后的第二角度,其中,所述第二角度为所述智能眼镜转动后的当前位置与所述初始位置之间沿所述第三方向的角度;判断所述第二角度是否大于或等于第二阈值;若判断结果为是,则沿所述第三方向做滑屏或翻页操作,以在所述智能眼镜的显示区域显示第二应用信息或所述第一应用信息的详细内容。
也就是说,在该实现方式中,当用户抬头唤醒屏幕后,智能眼镜的显示区域可显示第一应用信息,当用户做沿第三方向如向左/向右转头的动作,当向左/向右转动后的第二角度大于或等于第二阈值时,会做向左/右滑屏的操作,该操作类似于手机的滑屏操作,此时智能眼镜的显示区域可切换显示的消息或应用信息的内容。例如,滑屏前显示消息的一部分内容,而滑屏后显示消息的另一部分内容。或者滑屏前显示第一应用信息,例如时间,而滑屏后显示第二应用信息,如天气。
第三方面,本申请实施例提供一种智能眼镜的交互方法,所述交互方法包括:在智能眼镜处于唤醒模式时,检测佩戴所述智能眼镜的用户的头部的转动方向;根据所述转动方向进行不同方向滑屏或翻页操作,以显示同一消息/应用信息的不同部分或不同消息/应用信息。
在上述方案中,通过检测用户头部的转动方向来控制智能眼镜进行滑屏或翻页,具体地,可以是在检测到用户头部转动时即进行滑屏或翻页操作,也可是在检测到用户头部沿着某个方向的转动角度大于设定阈值时才进行滑屏或翻页操作。并且,可以显示同一消息的不同部分,例如滑屏前显示未接来电的图标,滑屏后显示未接来电的详情(包括来电时间、来电人等),或显示不同消息,例如滑屏前显示第一个未读短信,滑屏后显示第二个未读短信;或显示同一应用信息的不同部分,例如,翻页前显示当天的天气,翻页后显示明天的天气,或显示不同的应用信息,例如,翻页前显示时间,翻页后显示天气,从而能够使用户在不使用双手的情况下操控智能眼镜,操作简单方便,大大提升了用户体验。
在一种可能的实现方式中,所述交互方法还包括:通过语音指令、点击触控板和眨眼动作中的一种唤醒所述智能眼镜。
也就是说,在该实现方式中,可以通过语音指令来唤醒智能眼镜;或者通过点击智能眼镜的触控板来唤醒智能眼镜;或者通过眨眼动作来唤醒智能眼镜。当然,可以理解的是,还可以通过其他方式来唤醒智能眼镜,例如上面提到的通过抬头动作唤醒智能眼镜。
在一种可能的实现方式中,所述转动方向包括向上抬头、向下低头、向左转头、向右转头、向左摆头和向右摆头;所述不同方向滑屏操作包括向上滑屏、向下滑屏、向左滑屏、向右滑屏、向左上角滑屏和向右上角滑屏;其中,多个所述转动方向与多个所述滑屏操作一一对应。
也就是说,在该实现方式中,根据用户头部的不同转动方向,可以进行不同方向的滑屏操作,具体地,不同转动方向与不同方向的滑屏操作的一一对应关系可根据需要进行设置。例如,向上抬头实现向上滑屏操作,向下低头实现向下滑屏操作。
第四方面,本申请实施例提供一种智能眼镜的交互装置,所述交互装置包括:接收模块,用于接收通信设备发送的消息;显示模块,用于在智能眼镜的显示区域的边缘显示所述消息的提示标识;测量模块,用于在设定时间内测量佩戴所述智能眼镜的用户的头部沿第一方向转动后的第一角度,其中,所述第一角度为所述智能眼镜转动后的当前位置与初始位置之间沿所述第一方向的角度,所述初始位置为所述用户平视时所述智能眼镜所处的位置;判断模块,用于判断所述第一角度是否大于或等于第一阈值;所述显示模块,还用于在所述判断模块判断所述第一角度大于或等于所述第一阈值的情况下,进行滑屏或翻页操作以在所述显示区域显示所述消息展开后的详细内容;以及用于在所述判断模块判断所述第一角度小于所述第一阈值的情况下,使所述提示标识消失。
在一种可能的实现方式中,所述提示标识为图标或文字。
在一种可能的实现方式中,所述交互装置还包括:唤醒模块,用于在所述智能眼镜处于休眠模式且接收所述消息时唤醒所述智能眼镜;和/或,休眠模块,用于在所述判断模块判断所述第一角度小于所述第一阈值时,使所述智能眼镜进入休眠模式。
在一种可能的实现方式中,所述交互装置还包括:所述显示模块,还用于当所述消息的详细内容在所述显示区域未完全显示时,使所述消息的详细内容沿第二方向做滑屏或翻页操作,以在所述显示区域显示所述详细内容的未显示部分。
在一种可能的实现方式中,所述交互装置还包括:所述测量模块,还用于当所述消息的详细内容在所述显示区域未完全显示时,测量用户头部沿第三方向转动后的第二角度,其中,所述第二角度为所述智能眼镜转动后的当前位置与所述初始位置之间沿所述第三方向的角度;所述判断模块,还用于判断所述第二角度是否大于或等于第二阈值;所述显示模块,还用于在所述判断模块判断所述第二角度大于或等于所述第二阈值的情况下,使所述消息的详细内容沿所述第三方向做滑屏或翻页操作,以在所述显示区域显示所述详细内容的未显示部分。
第五方面,本申请实施例提供一种智能眼镜的交互装置,所述交互装置包括:测量模块,用于在智能眼镜处于休眠模式时测量用户头部沿第一方向转动后的第一角度,其中,所述第一角度为所述智能眼镜转动后的当前位置与初始位置之间沿第一方向的角度,所述初始位置为所述用户平视时所述智能眼镜所处的位置,所述智能眼镜在所述初始位置处于休眠模式;判断模块,用于判断所述第一角度是否大于或等于第一阈值,唤醒模块,用于在所述判断模块判断所述第一角度大于或等于所述第一阈值的情况下,将所述智能眼镜的显示屏幕唤醒。
在一种可能的实现方式中,所述交互装置还包括:显示模块,用于在唤醒所述智能眼镜的同时在所述显示区域显示相应的第一应用信息,其中,所述第一应用信息是预先设置的。
在一种可能的实现方式中,所述交互装置还包括:所述测量模块,还用于当所述智能眼镜处于唤醒模式时测量用户头部沿第二方向转动后的所述第一角度,其中,所述第二方向与所述第一方向相反;所述判断模块,还用于判断所述第一角度是否小于第一阈值;休眠模块,用于在所述判断模块判断所述第一角度小于所述第一阈值的情况下,使所述智能眼镜进入所述休眠模式。
在一种可能的实现方式中,所述交互装置还包括:关闭模块,用于关闭所述智能眼镜,以在转头使所述第一角度大于或等于所述第一阈值时不唤醒所述智能眼镜。
在一种可能的实现方式中,所述交互装置还包括:所述测量模块,还用于在所述智能眼镜处于唤醒模式时测量用户头部沿第三方向转动后的第二角度,其中,所述第二角度为所述智能眼镜转动后的当前位置与所述初始位置之间沿所述第三方向的角度;所述判断模块,还用于判断所述第二角度是否大于或等于第二阈值;所述显示模块,还用于在所述判断模块判断所述第二角度大于或等于所述第二阈值的情况下,沿所述第三方向做滑屏或翻页操作,以在所述智能眼镜的显示区域显示第二应用信息或所述第一应用信息的详细内容。
第六方面,本申请实施例提供一种智能眼镜的交互装置,所述交互装置包括:检测模块,用于在智能眼镜处于唤醒模式时,检测佩戴所述智能眼镜的用户的头部的转动方向;显示模块,用于根据所述转动方向进行不同方向的滑屏或翻页操作,以显示同一消息/应用信息的不同部分或不同消息/应用信息。
在一种可能的实现方式中,通过语音指令、点击触控板和眨眼动作中的一种唤醒所述智能眼镜。
在一种可能的实现方式中,所述转动方向包括向上抬头、向下低头、向左转头、向右转头、向左摆头和向右摆头;所述不同方向滑屏或翻页操作包括向上滑屏、向下滑屏、向左滑屏、向右滑屏、向左上角滑屏和向右上角滑屏;其中,多个所述转动方向与多个所述滑屏或翻页操作一一对应。
第七方面,本申请实施例提供一种智能眼镜,所述智能眼镜包括上述第四方面或第五方面或第六方面提供的智能眼镜的交互装置。
第八方面,本申请实施例提供一种智能眼镜,所述智能眼镜包括眼镜主体和设置在所述眼镜主体上的惯性测量单元、处理器和显示器,所述惯性测量单元用于测量所述智能眼镜的当前所处位置与初始位置之间沿设定方向的设定角度,其中,所述初始位置为用户平视时所述智能眼镜所处的位置;所述处理器用于根据所述设定方向和所述设定角度确定待显示的消息/应用信息内容;所述显示器用于显示所述处理器确定的消息/应用信息内容。
第九方面,本申请实施例提供一种智能眼镜,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述第一方面、第二方面和第三方面中的一者所提供的方法。
第十方面,本申请实施例提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现上述第一方面、第二方面和第三方面中的一者所提供的方法。
第十一方面,本申请实施例提供一种包含指令的计算机程序产品,当该指令在计算机上运行时,使得计算机执行上述第一方面、第二方面和第三方面中的一者所提供的方法。
本申请实施例中,通过测量用户头部的转动来控制智能眼镜进行滑屏或翻页,可让用户在不使用双手的情况下与智能眼镜进行交互或操控智能眼镜,操作简单方便,大大提升了用户体验。具体地,当眼镜接收到消息后,仅显示消息的提示标识如图标,用户可选择沿第一方向转动如低头来进行滑屏或翻页操作以查看信息的详细内容,或不做任何操作,一段时间后提示标识消失,这样用户可选择查看或不查看详细内容。也就是说,本申请实施例中,智能眼镜接收到消息后不会直接将详细内容推送到显示区域,而是仅显示消息的提示标识,这样不会因为将整条信息直接推送至用户眼前的显示区域而遮挡用户观察真实世界的视线,用户视线不会被过分遮挡,此后,通过简单的低头和/或转头操作即可查看详细内容,在方便用户的同时避免了因用户的视线被遮挡而发生危险的问题。
附图说明
图1为本申请实施例提供的智能眼镜的结构示意图;
图2为本申请第一实施例提供的智能眼镜的交互方法的流程图。;
图3为图2所示的交互方法的过程图;
图4为本申请第二实施例提供的智能眼镜的交互方法的流程图;
图5为图4所示的交互方法中唤醒智能眼镜的示意图;
图6为图4所示的交互方法中滑屏操作的过程图;
图7为本申请第三实施例提供的智能眼镜的交互方法的流程图;
图8为佩戴智能眼镜的用户的头部绕三轴转动时的转动方向的示意图;
图9为用户头部绕图8中所示的x轴转动时的转动方向的示意图;
图10为用户头部绕图8中所示的y轴转动时的转动方向的示意图;
图11为本申请第一实施例提供的智能眼镜的交互装置的框图;
图12为本申请第二实施例提供的智能眼镜的交互装置的框图;
图13为本申请第三实施例提供的智能眼镜的交互装置的框图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述。
随着计算机图形技术的发展,增强现实(Augmented Reality,AR)技术逐渐应用到人们的工作和生活中。AR技术利用计算机模拟产生一个三维(three-dimensional,3D)的数字内容,用户在观察该数字内容的同时也可以观察外界的真实世界,即数字内容和真实世界是叠加在一起的。为了使数字内容和真实世界更好的融合在一起,AR头显需要较大的视场角、3D空间重建能力以及用户友好的交互方式等等,导致产品的体积、重量较大,功耗很高,不能满足长时间佩戴的要求。另一类AR产品为了实现轻便和长时间佩戴的目的,牺牲了上述的部分指标,例如视场角只有20°左右,不具备3D重建能力等。这类AR产品又被称为智能眼镜,其仅具有简单的信息提醒功能,体积和重量较小,用户能够长时间佩戴。
AR头显中的3D重建技术又被称为同步定位与地图构建(Simultaneouslocalization and mapping,SLAM),具有SLAM的AR头显可以将虚拟的数字内容放置在真实世界的不同位置,用户在移动或转动头部的时候数字内容和真实世界的相对位置不变,给用户很好的虚实融合体验。而对于不带有SLAM的AR头显如上述的智能眼镜,显示内容固定在用户的视场中,该显示内容会跟随用户头部移动,存在数字内容可能遮挡用户观察真实世界的视线的问题。在用户正在驾驶车辆或者在过马路的情况下,这种视线遮蔽有造成交通事故的风险。另外,由于智能眼镜大多采用一体设计,即没有外接的电源,为了延长续航时间,目前智能眼镜大部分时间处在休眠模式,因此,在需要使用智能眼镜时需先进行唤醒操作。
为了能更好地了解智能眼镜的控制过程,下面介绍两种智能眼镜的交互方式。
(1)采用触控板进行交互。当用户想要查看时间、天气、新闻等信息时,需要用手指点击智能眼镜的眼镜臂上的触控板来唤醒眼镜,并可通过单指或双指的点击以及滑动来进行交互。当眼镜和手机通过蓝牙连接时,手机收到的信息会同步推送到眼镜上显示,用户同样可以通过触控板进行删除、回复、标记为已读等操作。上述的交互方式存在以下几个问题:1、在用户想要查看时间、天气、日历等常用信息时,需要通过敲击触控板来唤醒眼镜,操作过程中会引起眼镜晃动,影响用户观察外界场景,同时需要用户手部动作,操作不方便;2、当手机收到的信息并推送到眼镜上显示时,可能用户正在进行需要注意力集中的操作,如开车、过马路或切菜等,突然出现的信息会遮挡用户观察真实世界的视线,存在对用户安全造成危害的风险。
(2)采用指环来操控智能眼镜,眼镜和指环需配套使用。指环上设置有摇杆,用户可通过摇杆来操控眼镜。在该方案中,用户必须要额外佩带一个指环来控制眼镜,会对用户的手部产生一定的影响,并且操作不方便,同时指环容易遗失或损坏,影响体验效果。
由于不带有SLAM的AR头显不能做到很好的虚实融合,存在遮挡用户视线导致发生危险事故的问题,而采用触控板或指环与智能眼镜进行交互的方式操作不便,影响用户体验效果。因此,本发明提出一种智能眼镜及其交互方法和交互装置,可应用于不具有SLAM的AR头显中,能够根据智能眼镜沿设定方向的转动角度进行滑屏和翻页操作或唤醒智能眼镜和使智能眼镜进入休眠模式,让用户在不使用双手的情况下与智能眼镜进行交互,操作简单方便,大大提升了用户体验。
图1为本申请实施例提供的智能眼镜的结构示意图。如图1所示,智能眼镜包括眼镜主体100和设置在眼镜主体100上的惯性测量单元(Inertial measurement unit,IMU)200、处理器300和显示器。IMU是一种测量物体三轴姿态角的传感器。IMU可以是加速度计、陀螺仪、地磁计等传感器中一种或几种的组合。惯性测量单元200用于测量智能眼镜的当前所处位置与初始位置之间沿设定方向的设定角度,其中,所述初始位置为所述用户平视时所述智能眼镜所处的位置。处理器300用于根据设定方向和设定角度确定待显示的消息/应用信息内容。显示器用于显示处理器300确定的消息/应用信息内容。通过IMU可测量用户头部沿不同方向的转动角度,处理器根据用户头部的转动角度对智能眼镜传达相应的指令,使显示器显示相应的信息内容,实现了用户在不使用双手的情况下与智能眼镜进行交互的目的。
下面对本申请实施例提供的智能眼镜的交互方法进行详细介绍。
图2为本申请第一实施例提供的智能眼镜的交互方法的流程图。图3为图2所示的交互方法的过程图。如图2所示,该交互方法包括如下步骤:
步骤S201,接收通信设备发送的消息。
其中,在智能眼镜处于休眠模式且接收消息时可唤醒智能眼镜。
步骤S202,在智能眼镜的显示区域的边缘显示消息的提示标识。如图3所示,在智能眼镜接收通信设备发送的消息时仅在显示区域/视场的边缘显示提示标识,即提示标识可为图标。可以理解的是,提示标识还可为其他内容,例如,提示标识为文字。
步骤S203,在设定时间内测量佩戴智能眼镜的用户的头部沿第一方向如向下转动后的第一角度,其中,第一角度为智能眼镜转动后的当前位置与初始位置之间沿第一方向的角度,初始位置为用户平视时智能眼镜所处的位置。
步骤S204,判断第一角度是否大于或等于第一阈值。
步骤S205,若判断结果为是,则进行滑屏或翻页操作以在显示区域显示消息展开后的详细内容,如图3所示。
步骤S206,若判断结果为否,即当第一角度小于第一阈值时,则提示标识消失,智能眼镜可进入休眠模式。也就是说,当第一角度小于第一阈值时,提示标识消失,此时智能眼镜可仍处于唤醒模式;或者,当第一角度小于第一阈值时,智能眼镜进入休眠模式,提示标识消失。可选地,当智能眼镜被再次唤醒时,仍可看到提示标识。
具体地,当处于休眠模式的智能眼镜接收到通信设备如手机发送的消息如信息、社交软件提醒、电话呼入等时,智能眼镜将被自动唤醒。与直接将详细内容显示在显示区域内的方案不同的是,在本申请的实施例中,在接到通讯设备的消息/触发信号后,仅在智能眼镜的显示区域的边缘位置显示一个简单的提示标识,例如显示短信、邮件、社交软件、电话等的图标,使用户可以快速判断出接收的消息类型,此过程不会吸引用户过多的注意力。接着,在提示标识显示的一段设定时间内,如果测量到用户头部沿第一方向转动的第一角度大于或等于第一阈值时,可从智能眼镜的系统中抓取该消息的详细内容,例如短信息或邮件的内容以及发件人、来电人详情等,并按照预设定生成显示画面,在显示区域显示消息展开后的详细内容。如果在设定时间内测量到用户头部沿第一方向转动的第一角度小于第一阈值时,则提示标识消失,智能眼镜可进入休眠模式。
另外,当消息的详细内容在显示区域未完全显示时,可使消息的详细内容沿第二方向如向上做滑屏或翻页操作,以在显示区域显示详细内容的未显示部分。也就是说,当消息的详细内容较长时,在用户头部沿第一方向如向下转动后,若第一角度大于或等于第一阈值,会在显示区域显示消息展开后的详细内容的部分,并且可自动使消息的详细内容向上做滑屏或翻页操作,以显示详细内容的剩余的未显示部分。具体地,如图3所示,若在设定时间内检测到第一角度大于或等于第一阈值,原始画面可缩小并向上滑屏,随着原始的显示画面滑出,滑屏后的显示画面滑入,直至原始画面完全滑出,最后滑屏后的显示画面放大至正常状态。
或者,当消息的详细内容在显示区域未完全显示时,可测量用户头部沿第三方向如向左或向右转动后的第二角度,其中,第二角度为智能眼镜转动后的当前位置与初始位置之间沿第三方向的角度;判断第二角度是否大于或等于第二阈值;若判断结果为是,使消息的详细内容沿第三方向做滑屏或翻页操作,以在显示区域显示详细内容的未显示部分。也就是说,当消息的详细内容较长时,在用户头部沿第一方向如向下转动后,若第一角度大于或等于第一阈值,会在显示区域显示消息展开后的详细内容的部分,此时,若用户头部沿三方向如向左/向右转头且转动后的第二角度大于或等于第二阈值,可使消息的详细内容向左/向右做滑屏或翻页操作,以显示详细内容的剩余的未显示部分。
本申请第一实施例的智能眼镜的交互方法,当眼镜接收到消息后,仅显示消息的提示标识如图标,用户可选择沿第一方向转动如低头来进行滑屏或翻页操作以查看信息的详细内容,或不做任何操作,一段时间后提示标识消失,这样用户可选择查看或不查看详细内容。也就是说,智能眼镜接收到信息后不会直接将详细内容推送到显示区域,而是仅显示消息的图标,这样不会因为将整条消息直接推送至用户眼前的显示区域而遮挡用户观察真实世界的视线,用户视线不会被过分遮挡,接着,通过简单的低头和/或转头操作即可查看详细内容,在方便用户的同时避免了因用户的视线被遮挡而发生危险的问题。通过测量用户头部的转动来控制智能眼镜进行滑屏或翻页,其中,画面切换的方式可以有但不限于采用淡入淡出、旋转、百叶窗等方式,能够让用户在不使用双手的情况下与智能眼镜进行交互,操作简单方便,大大提升了用户体验。
图4为本申请第二实施例提供的智能眼镜交互方法的流程图。如图4所示,该交互方法包括如下步骤:
步骤S401,在智能眼镜处于休眠模式时测量用户头部沿第一方向转动如向上抬头后的第一角度,其中,第一角度为智能眼镜转动后的当前位置与初始位置之间沿第一方向的角度,初始位置为用户平视时智能眼镜所处的位置,智能眼镜在初始位置处于休眠模式。
步骤S402,判断第一角度是否大于或等于第一阈值;
步骤S403,若判断结果为是,将智能眼镜的显示屏幕唤醒。
并且,在唤醒智能眼镜的同时可在智能眼镜的显示区域显示相应的第一应用信息,其中,第一应用信息是预先设置的。也就是说,可根据需要,设置唤醒智能眼镜时显示区域显示的应用的类型(如时间、天气)或内容(如详细内容或简略内容)。另外,通过例如点击触控板来关闭智能眼镜,从而在转头使第一角度大于或等于第一阈值时可以不唤醒智能眼镜。
图5为图4所示的交互方法中唤醒智能眼镜的示意图。用户在正常平视时,智能眼镜处于初始位置且处于休眠模式,不显示任何画面。如图5所示,当用户沿第一方向如向上抬头时,测量用户的抬头动作,并计算用户向上抬头的第一角度α。当该第一角度α大于或等于第一阈值时,智能眼镜被唤醒,同时可按照预先设置从智能眼镜或能够与智能眼镜通信的其他设备如手机和平板中抓取时间、天气、事项提醒中的至少一者的信息并将该信息生成待显示内容后送至显示区域显示。如图5所示,智能眼镜的显示区域显示的相应的第一应用信息为时间。当第一角度α小于第一阈值时,则智能眼镜将继续处于休眠模式。
如果需要将已唤醒的智能眼镜关闭,即使智能眼镜处于休眠模式,如图4所示,可按照以下步骤进行操作:
步骤S404,当智能眼镜处于唤醒模式时测量用户头部沿第二方向转动如向下低头后的第一角度,其中,第二方向与第一方向相反;
步骤S405,判断第一角度是否小于第一阈值;
步骤S406,若判断结果为是,则使智能眼镜进入休眠模式。
也就是说,当用户抬头唤醒屏幕后,向下低头恢复平视时,此时第一角度小于第一阈值时,即可使智能眼镜进入休眠模式。
另外,当需要查看其它应用信息,或者唤醒时显示区域显示的第一应用信息为提示概要,需要查看第一应用信息的详细内容,则可按照以下步骤进行操作:
步骤S404’,测量用户头部沿第三方向如向左/右转动后的第二角度,其中,第二角度为智能眼镜转达后的当前位置与初始位置之间沿第三方向的角度。
步骤S405’,判断第二角度是否大于或等于第二阈值。
步骤S406’,若判断结果为是,则沿第三方向做滑屏或翻页操作,以在智能眼镜的显示区域显示第二应用信息或第一应用信息的详细内容。
也就是说,当用户抬头唤醒屏幕后,智能眼镜的显示区域显示第一应用信息,接着,用户做沿第三方向如向左/向右转头的动作,当向左/向右转动后的第二角度大于或等于第二阈值时,智能眼镜向左/右滑屏或翻页,使得智能眼镜的显示区域可显示第一应用信息的详细内容/或第二应用信息。例如滑屏或翻页前显示未读消息的概要,滑屏或翻页后显示消息的详细内容。或者滑屏或翻页前显示第一应用信息,例如时间,而滑屏或翻页后显示第二应用信息,如天气。
图6为图4所示的交互方法中滑屏操作的过程图。以向右滑屏为例进行说明,如图6所示,滑屏前显示时间,滑屏时,首先原始的显示画面会缩小一定的比例,然后画面向右滑动,随着原始的显示画面滑出,滑屏后的显示画面滑入,直至原始画面完全滑出,最后滑屏后的显示画面放大至正常状态,滑屏后显示机票信息。其中,黑色虚线表示显示区域的范围,在用户实际使用过程中可不显示。
在该实施例中,用户在平常的工作生活中处于平视状态时智能眼镜不显示画面,但用户只需抬头即可看见带有常用信息的屏幕。当用户做抬头的动作但不想唤醒智能眼镜时,可采用点击触控板的方式来关闭智能眼镜的显示屏幕。另外,用户可通过调整第一阈值和第二阈值,来适应自己的工作习惯,尽量降低使用智能眼镜时对自己的影响。并且,智能眼镜也可以收集用户的操作数据,经过学习适应用户的操作习惯。
本申请第二实施例的智能眼镜的交互方法,通过用户头部沿第一方向的转动如向上抬头能够唤醒眼镜,通过沿第二方向的转动如低头平视能够使处于唤醒模式的智能眼镜进入休眠模式以及通过沿第三方向的转动如向左/向右转头等能够进行滑屏或翻页,方便用户查看时间、天气、待办事项等常用信息,可让用户在不使用双手的情况下与智能眼镜进行交互,操作简单方便,大大提升了用户体验。
图7为本申请第三实施例提供的智能眼镜的交互方法的流程图。如图7所示,该交互方法包括如下步骤:
步骤S701,在智能眼镜处于唤醒模式时,检测佩戴所述智能眼镜的用户的头部的转动方向。其中,可通过语音指令、点击触控板和眨眼动作中的一种唤醒所述智能眼镜。
步骤S702,根据所述转动方向进行不同方向的滑屏或翻页操作,以显示同一消息/应用信息的不同部分或不同消息/应用信息。这里的“消息”可以是通信设备发送给智能眼镜的,例如短信消息或者电话消息。这里的“应用信息”可以是智能眼镜本身的信息,例如智能眼镜上安装的应用的信息。
其中,转动方向可包括向上抬头、向下低头、向左转头、向右转头、向左摆头和向右摆头。不同方向滑屏操作包括向上滑屏、向下滑屏、向左滑屏、向右滑屏、向左上角滑屏和向右上角滑屏。多个转动方向与多个滑屏操作一一对应。并且,可以采用多种方式切换画面。例如淡入淡出、旋转、百叶窗等。
也就是说,当智能眼镜已经被唤醒时,用户可以通过头部的动作来控制智能眼镜滑屏或翻页。以滑屏为例进行说明,具体地,用户可以通过向上抬头进行向上滑屏操作、通过向下低头进行向下滑屏操作、向左转头进行向左滑屏操作、向右转头进行向右滑屏操作、向左摆头进行向左上角滑屏操作和向右摆头进行向右上角滑屏操作。
图8为佩戴智能眼镜的用户的头部绕三轴转动时的转动方向的示意图。如图8所示,y轴的正方向为竖直向上方向,z轴的正方向为用户平视时向前的方向,x轴的正方向为与y轴和z轴垂直且朝向用户左耳的方向。
图9为用户头部绕图8中所示的x轴转动时的转动方向的示意图。如图8和图9所示,用户平视时对应显示区域2。可以绕x轴向上抬头,当抬头的位置与初始位置之间的角度大于或等于阈值1时对应显示区域1;或者可以绕x轴向下低头,当低头的位置与初始位置之间的角度大于或等于阈值2时对应显示区域3。显示区域1-3可显示不同的消息画面,例如不同的应用,具体地,显示区域1可显示时间,显示区域2可显示天气,显示区域3可显示短信;或者,显示区域1-3可显示同一应用的不同信息,具体地,显示区域2可显示短信的图标,显示区域3可显示短信的详细内容的上半部分,显示区域3可显示短信的详细内容的下半部分。
图10为用户头部绕图8中所示的y轴转动时的转动方向的示意图。如图8和图10所示,用户平视时对应显示区域2。可以绕y轴向右转头,当转动后的位置与初始位置之间的角度大于或等于阈值3时对应显示区域4;或者可以绕y轴向左转头,当转动后的位置与初始位置之间的角度大于或等于阈值4时对应显示区域5。显示区域2、4和5可显示不同的消息画面,例如不同的应用,具体地,显示区域2可显示天气,显示区域4可显示时间,显示区域5可显示短信;或者,显示区域2、4和5可显示同一应用的不同信息,具体地,显示区域2可显示短信的图标,显示区域4可显示短信的详细内容的上半部分,显示区域5可显示短信的详细内容的下半部分。
本申请第三实施例的智能眼镜的交互方法,通过检测用户头部的转动方向来控制智能眼镜进行滑屏或翻页,可以是在检测到用户头部转动时即进行滑屏或翻页,也可以是在检测到用户头部沿着某个方向的转动角度大于设定阈值时才进行滑屏或翻页,从而可以使用户在不使用双手的情况下操控智能眼镜,操作简单方便,大大提升了用户体验。
图11为本申请第一实施例提供的智能眼镜的交互装置的框图。如图11所示,该交互装置10包括接收模块11、显示模块12、测量模块13和判断模块14。接收模块11用于接收通信设备发送的消息。显示模块12用于在智能眼镜的显示区域的边缘显示消息的提示标识。测量模块13用于在设定时间内测量佩戴智能眼镜的用户的头部沿第一方向如向下转动后的第一角度,其中,第一角度为智能眼镜转动后的当前位置与初始位置之间沿第一方向的角度,初始位置为用户平视时智能眼镜所处的位置。判断模块14用于判断第一角度是否大于或等于第一阈值。显示模块12还用于在判断模块14判断第一角度大于或等于第一阈值的情况下,进行滑屏或翻页操作以在显示区域显示消息展开后的详细内容,以及用于在判断模块14判断第一角度小于第一阈值的情况下,使提示标识消失。
其中,提示标识可为图标或文字。测量模块13能够测量佩戴智能眼镜的用户的头部的转动角度和转动方向。测量模块13可为惯性测量单元(Inertial measurement unit,IMU)。IMU可以是加速度计、陀螺仪、地磁计等传感器中一种或几种的组合。
该交互装置10还可包括唤醒模块15,唤醒模块15用于在智能眼镜处于休眠模式且接收消息时唤醒智能眼镜。可选地,交互装置10还包括休眠模块16,用于在判断模块14判断第一角度小于第一阈值时,使智能眼镜进入休眠模式。也就是说,当第一角度小于第一阈值时,提示标识消失,此时智能眼镜可仍处于唤醒模式;或者,当第一角度小于第一阈值时,智能眼镜进入休眠模式,提示标识消失。可选得,当再次唤醒智能眼镜时,可仍显示提示标识。
另外,显示模块12还用于当消息的详细内容在显示区域未完全显示时,使消息的详细内容沿第二方向如向上做滑屏或翻页操作,以在显示区域显示详细内容的未显示部分。也就是说,当消息的详细内容较长时,在用户头部沿第一方向如向下转动后,若第一角度大于或等于第一阈值,会在显示区域显示消息展开后的详细内容的部分,并且可自动使消息的详细内容沿第二方向如向上做滑屏或翻页操作,以显示详细内容的剩余的未显示部分。
或者,测量模块13还用于当消息的详细内容在显示区域未完全显示时,测量用户头部沿第三方向如向左或向右转动后的第二角度,其中,第二角度为智能眼镜转动后的当前位置与初始位置之间沿第三方向的角度。判断模块14还用于判断第二角度是否大于或等于第二阈值。显示模块15还用于在判断模块14判断第二角度大于第二阈值的情况下,使消息的详细内容沿第三方向做滑屏或翻页操作,以在显示区域显示详细内容的未显示部分。也就是说,当消息的详细内容较长时,在用户头部向下转动后,若第一角度大于第一阈值,会在显示区域显示消息展开后的详细内容的部分。接着,若用户头部沿第三方向如向左/向右转头且转动后的第二角度大于或等于第二阈值,可使消息的详细内容向左做滑屏或翻页操作,以显示详细内容的剩余的未显示部分。上述情况中,用户转头的方向与滑屏或翻页的方向一致。可以理解的是,用户转头的方向与滑屏或翻页的方向也可不一致。例如用户头部向左转动,使消息的详细内容向右做滑屏或翻页操作。
图12为本申请第二实施例提供的智能眼镜的交互装置的框图。如图12所示,该交互装置10’包括测量模块11’、判断模块12’和唤醒模块13’。测量模块11’用于在智能眼镜处于休眠模式时测量用户头部沿第一方向如向上转动后的第一角度,其中,第一角度为智能眼镜转动后的当前位置与初始位置之间沿第一方向的角度,初始位置为用户平视时智能眼镜所处的位置,智能眼镜在初始位置处于休眠模式。判断模块12’用于判断第一角度是否大于或等于第一阈值。唤醒模块13’用于在判断模块12’判断第一角度大于第一阈值的情况下,将智能眼镜的显示屏幕唤醒。
进一步地,该交互装置10’还可包括显示模块14’。显示模块14’用于在唤醒智能眼镜的同时在显示区域显示相应的第一应用信息,其中,第一应用信息是预先设置的。
并且,测量模块11’还用于在智能眼镜处于唤醒模式时测量用户头部沿第二方向转动后的第一角度,其中,第二方向与第一方向相反。判断模块12’还用于判断第一角度是否小于第一阈值。交互装置10’还可包括休眠模块15’,用于在判断模块判断第一角度小于第一阈值的情况下,使智能眼镜进入休眠模式。
或者,测量模块11’还用于在智能眼镜处于唤醒模式时测量用户头部沿第三方向如向左或向右转动后的第二角度,其中,第二角度为智能眼镜转动后的当前位置与初始位置之间沿第三方向的角度。判断模块12’还用于判断第二角度是否大于或等于第二阈值。显示模块14’还用于在判断模块判断第二角度大于或等于第二阈值的情况下,沿第三方向做滑屏或翻页操作,以在智能眼镜的显示区域显示第二应用信息或第一应用信息的详细内容。例如,切换前显示第一应用的图标,切换后显示第一应用的详细信息。或者,切换前显示第一应用信息,切换后显示第二应用信息。
另外,交互装置10’还可包括关闭模块16’。关闭模块16’用于关闭智能眼镜,以在转头使第一角度大于或等于第一阈值时不唤醒智能眼镜。
图13为本申请第三实施例提供的智能眼镜的交互装置的框图。如图13所示,该交互装置10”包括检测模块11”和显示模块12”。检测模块11”用于在智能眼镜处于唤醒模式时,检测佩戴智能眼镜的用户的头部的转动方向。显示模块12”用于根据转动方向进行不同方向滑屏或翻页操作,以显示同一消息/应用信息的不同部分或不同消息/应用信息。
其中,通过语音指令、点击触控板和眨眼动作中的一种唤醒可智能眼镜。转动方向可包括向上抬头、向下低头、向左转头、向右转头、向左摆头和向右摆头。不同方向滑屏或翻页操作可包括向上滑屏、向下滑屏、向左滑屏、向右滑屏、向左上角滑屏和向右上角滑屏。多个转动方向与多个滑屏或翻页操作一一对应。具体地,向上抬头可进行向上滑屏。向下低头可进行向下滑屏。向左转头可进行向左滑屏。向右转头可进行向右滑屏。向左摆头可进行向左上角滑屏。向右摆头可进行向右上角滑屏。上述情况中,用户头部的转动方向与滑屏的方向一致。可以理解的是,用户头部的转动方向也可与滑屏的方向不一致。例如用户头部向左转动,使消息的详细内容向右滑屏。
另外,本申请实施例还提供一种智能眼镜,该智能眼镜包括上述实施例的智能眼镜的交互装置。
本申请实施例还提供一种智能眼镜,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述的智能眼镜的交互方法。
本领域普通技术人员应该还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分步骤是可以通过程序来指令处理器完成,所述的程序可以存储于计算机可读存储介质中,所述存储介质是非短暂性(英文:non-transitory)介质,例如随机存取存储器,只读存储器,快闪存储器,硬盘,固态硬盘,磁带(英文:magnetic tape),软盘(英文:floppy disk),光盘(英文:optical disc)及其任意组合。
以上所述,仅为本申请较佳的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应该以权利要求的保护范围为准。
Claims (19)
1.一种智能眼镜的交互方法,其特征在于,所述交互方法包括:
接收通信设备发送的消息;
在智能眼镜的显示区域的边缘显示所述消息的提示标识;
在设定时间内测量佩戴所述智能眼镜的用户的头部沿第一方向转动后的第一角度,其中,所述第一角度为所述智能眼镜转动后的当前位置与初始位置之间沿所述第一方向的角度,所述初始位置为所述用户平视时所述智能眼镜所处的位置;
判断所述第一角度是否大于或等于第一阈值;
若判断结果为是,则进行滑屏或翻页操作以在所述显示区域显示所述消息展开后的详细内容;若判断结果为否,则所述提示标识消失。
2.如权利要求1所述的交互方法,其特征在于,所述提示标识为图标或文字。
3.如权利要求1或2所述的交互方法,其特征在于,所述交互方法还包括:
在所述智能眼镜处于休眠模式且接收所述消息时唤醒所述智能眼镜;和/或,
在判断所述第一角度小于所述第一阈值时,使所述智能眼镜进入休眠模式。
4.如权利要求1-3中任一项所述的交互方法,其特征在于,所述交互方法还包括:
当所述消息的详细内容在所述显示区域未完全显示时,使所述消息的详细内容沿第二方向做滑屏或翻页操作,以在所述显示区域显示所述详细内容的未显示部分。
5.如权利要求1-3中任一项所述的交互方法,其特征在于,所述交互方法还包括:
当所述消息的详细内容在所述显示区域未完全显示时,测量用户头部沿第三方向转动后的第二角度,其中,所述第二角度为所述智能眼镜转动后的当前位置与所述初始位置之间沿所述第三方向的角度;
判断所述第二角度是否大于或等于第二阈值;
若判断结果为是,使所述消息的详细内容沿所述第三方向做滑屏或翻页操作,以在所述显示区域显示所述详细内容的未显示部分。
6.一种智能眼镜的交互方法,其特征在于,所述交互方法包括:
在智能眼镜处于休眠模式时测量用户头部沿第一方向转动后的第一角度,其中,所述第一角度为所述智能眼镜转动后的当前位置与初始位置之间沿第一方向的角度,所述初始位置为所述用户平视时所述智能眼镜所处的位置,所述智能眼镜在所述初始位置处于休眠模式;
判断所述第一角度是否大于或等于第一阈值;
若判断结果为是,将所述智能眼镜的显示屏幕唤醒。
7.如权利要求6所述的交互方法,其特征在于,所述交互方法还包括:
在唤醒所述智能眼镜的同时在所述智能眼镜的显示区域显示相应的第一应用信息,其中,所述第一应用信息是预先设置的。
8.如权利要求6或7所述的交互方法,其特征在于,所述交互方法还包括:
当所述智能眼镜处于唤醒模式时测量用户头部沿第二方向转动后的所述第一角度,其中,所述第二方向与所述第一方向相反;
判断所述第一角度是否小于第一阈值;
若判断结果为是,则使所述智能眼镜进入所述休眠模式。
9.如权利要求6-8中任一项所述的交互方法,其特征在于,所述交互方法还包括:
关闭所述智能眼镜,以在转头使所述第一角度大于或等于所述第一阈值时不唤醒所述智能眼镜。
10.如权利要求7-9中任一项所述的交互方法,其特征在于,所述交互方法还包括:
在所述智能眼镜处于唤醒模式时测量所述用户头部沿第三方向转动后的第二角度,其中,所述第二角度为所述智能眼镜转动后的当前位置与所述初始位置之间沿所述第三方向的角度;
判断所述第二角度是否大于或等于第二阈值;
若判断结果为是,则沿所述第三方向做滑屏或翻页操作,以在所述智能眼镜的显示区域显示第二应用信息或所述第一应用信息的详细内容。
11.一种智能眼镜的交互方法,其特征在于,所述交互方法包括:
在智能眼镜处于唤醒模式时,检测佩戴所述智能眼镜的用户的头部的转动方向;
根据所述转动方向进行不同方向滑屏或翻页操作,以显示同一消息/应用信息的不同部分或不同消息/应用信息。
12.如权利要求11所述的交互方法,其特征在于,所述交互方法还包括:通过语音指令、点击触控板和眨眼动作中的一种唤醒所述智能眼镜。
13.如权利要求11或12所述的交互方法,其特征在于:
所述转动方向包括向上抬头、向下低头、向左转头、向右转头、向左摆头和向右摆头;
所述不同方向滑屏操作包括向上滑屏、向下滑屏、向左滑屏、向右滑屏、向左上角滑屏和向右上角滑屏;
其中,多个所述转动方向与多个所述滑屏操作一一对应。
14.一种智能眼镜的交互装置,其特征在于,所述交互装置包括:
接收模块,用于接收通信设备发送的消息;
显示模块,用于在智能眼镜的显示区域的边缘显示所述消息的提示标识;
测量模块,用于在设定时间内测量佩戴所述智能眼镜的用户的头部沿第一方向转动后的第一角度,其中,所述第一角度为所述智能眼镜转动后的当前位置与初始位置之间沿所述第一方向的角度,所述初始位置为所述用户平视时所述智能眼镜所处的位置;
判断模块,用于判断所述第一角度是否大于或等于第一阈值;
所述显示模块,还用于在所述判断模块判断所述第一角度大于或等于所述第一阈值的情况下,进行滑屏或翻页操作以在所述显示区域显示所述消息展开后的详细内容;以及在所述判断模块判断所述第一角度小于所述第一阈值的情况下,使所述提示标识消失。
15.一种智能眼镜的交互装置,其特征在于,所述交互装置包括:
测量模块,用于在智能眼镜处于休眠模式时测量用户头部沿第一方向转动后的第一角度,其中,所述第一角度为所述智能眼镜转动后的当前位置与初始位置之间沿第一方向的角度,所述初始位置为所述用户平视时所述智能眼镜所处的位置,所述智能眼镜在所述初始位置处于休眠模式;
判断模块,用于判断所述第一角度是否大于或等于第一阈值;
唤醒模块,用于在所述判断模块判断所述第一角度大于或等于所述第一阈值的情况下,将所述智能眼镜的显示屏幕唤醒。
16.一种智能眼镜的交互装置,其特征在于,所述交互装置包括:
检测模块,用于在智能眼镜处于唤醒模式时,检测佩戴所述智能眼镜的用户的头部的转动方向;
显示模块,用于根据所述转动方向进行不同方向的滑屏或翻页操作,以显示同一消息/应用信息的不同部分或不同消息/应用信息。
17.一种智能眼镜,其特征在于,所述智能眼镜包括眼镜主体和设置在所述眼镜主体上的惯性测量单元、处理器和显示器,
所述惯性测量单元用于测量所述智能眼镜的当前所处位置与初始位置之间沿设定方向的设定角度,其中,所述初始位置为用户平视时所述智能眼镜所处的位置;
所述处理器用于根据所述设定方向和所述设定角度确定待显示的消息/应用信息内容;
所述显示器用于显示所述处理器确定的消息/应用信息内容。
18.一种智能眼镜,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至13中任一项所述的智能眼镜的交互方法。
19.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至13中任一项所述的智能眼镜交互方法。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010849479.1A CN114077302A (zh) | 2020-08-21 | 2020-08-21 | 一种智能眼镜及其交互方法和交互装置 |
EP21857450.7A EP4195004A4 (en) | 2020-08-21 | 2021-07-21 | INTELLIGENT GLASSES AND INTERACTION METHOD AND DEVICE THEREOF |
US18/042,100 US20230333384A1 (en) | 2020-08-21 | 2021-07-21 | Smart Glasses, and Interaction Method and Interaction Apparatus Thereof |
PCT/CN2021/107634 WO2022037355A1 (zh) | 2020-08-21 | 2021-07-21 | 一种智能眼镜及其交互方法和交互装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010849479.1A CN114077302A (zh) | 2020-08-21 | 2020-08-21 | 一种智能眼镜及其交互方法和交互装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114077302A true CN114077302A (zh) | 2022-02-22 |
Family
ID=80282429
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010849479.1A Pending CN114077302A (zh) | 2020-08-21 | 2020-08-21 | 一种智能眼镜及其交互方法和交互装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20230333384A1 (zh) |
EP (1) | EP4195004A4 (zh) |
CN (1) | CN114077302A (zh) |
WO (1) | WO2022037355A1 (zh) |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130021373A1 (en) * | 2011-07-22 | 2013-01-24 | Vaught Benjamin I | Automatic Text Scrolling On A Head-Mounted Display |
CN103941875A (zh) * | 2014-05-05 | 2014-07-23 | 成都理想境界科技有限公司 | 一种翻页方法、装置及终端 |
CN105573483A (zh) * | 2014-11-06 | 2016-05-11 | 李妍 | 头戴式显示装置 |
KR20160062799A (ko) * | 2014-11-25 | 2016-06-03 | 주식회사 이랜텍 | 보안 성능이 강화된 스마트 안경 |
CN105807798A (zh) * | 2014-12-31 | 2016-07-27 | 上海乐相科技有限公司 | 一种头戴式智能眼镜抖动控制方法及装置 |
CN106484103A (zh) * | 2016-09-19 | 2017-03-08 | 上海斐讯数据通信技术有限公司 | 智能终端的控制方法、系统及智能终端 |
CN206440890U (zh) * | 2016-12-14 | 2017-08-25 | 无锡云瞳信息科技有限公司 | 可穿戴分离式智能眼镜 |
CN107133002A (zh) * | 2017-03-22 | 2017-09-05 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
CN107515670A (zh) * | 2017-01-13 | 2017-12-26 | 维沃移动通信有限公司 | 一种实现自动翻页的方法及移动终端 |
CN109407858A (zh) * | 2018-09-29 | 2019-03-01 | 深圳前海格物致知科技有限公司 | 一种智能眼镜 |
CN110096132A (zh) * | 2018-01-30 | 2019-08-06 | 北京亮亮视野科技有限公司 | 一种消除智能眼镜消息通知的方法与智能眼镜 |
CN110716635A (zh) * | 2018-07-13 | 2020-01-21 | 幻视互动(北京)科技有限公司 | 一种多传感器协同获取头部指令的方法及混合现实智能眼镜 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9316827B2 (en) * | 2010-09-20 | 2016-04-19 | Kopin Corporation | LifeBoard—series of home pages for head mounted displays (HMD) that respond to head tracking |
US9727124B2 (en) * | 2011-04-19 | 2017-08-08 | Apple Inc. | Power saving application update in a portable electronic device |
KR101443960B1 (ko) * | 2012-02-22 | 2014-11-03 | 주식회사 팬택 | 사용자 인증 전자 장치 및 방법 |
WO2016017997A1 (en) * | 2014-07-31 | 2016-02-04 | Samsung Electronics Co., Ltd. | Wearable glasses and method of providing content using the same |
US9719871B2 (en) * | 2014-08-09 | 2017-08-01 | Google Inc. | Detecting a state of a wearable device |
US9606364B2 (en) * | 2014-09-12 | 2017-03-28 | Microsoft Technology Licensing, Llc | Stabilizing motion of an interaction ray |
CN106970697B (zh) * | 2016-01-13 | 2020-09-08 | 华为技术有限公司 | 界面交互装置及方法 |
CN105955461A (zh) * | 2016-04-25 | 2016-09-21 | 乐视控股(北京)有限公司 | 一种交互界面管理方法和系统 |
WO2019079790A1 (en) * | 2017-10-21 | 2019-04-25 | Eyecam, Inc | ADAPTIVE GRAPHIC USER INTERFACE SYSTEM |
CN108803896B (zh) * | 2018-05-28 | 2021-07-16 | Oppo(重庆)智能科技有限公司 | 控制屏幕的方法、装置、终端及存储介质 |
US11055923B2 (en) * | 2018-12-19 | 2021-07-06 | Samsung Electronics Co., Ltd. | System and method for head mounted device input |
US11107265B2 (en) * | 2019-01-11 | 2021-08-31 | Microsoft Technology Licensing, Llc | Holographic palm raycasting for targeting virtual objects |
CN110531920B (zh) * | 2019-08-29 | 2021-05-14 | Oppo广东移动通信有限公司 | 侧边工具栏的显示方法、装置、终端及存储介质 |
CN110531859A (zh) * | 2019-09-02 | 2019-12-03 | 长沙理工大学 | 基于vr头显识别用户操作动作的人机交互方法和装置 |
JP2021119431A (ja) * | 2020-01-30 | 2021-08-12 | セイコーエプソン株式会社 | 表示システム、コントローラー、表示システムの制御方法およびプログラム |
AU2020233622B2 (en) * | 2020-05-11 | 2022-03-10 | Apple Inc. | System, method and user interface for supporting scheduled mode changes on electronic devices |
-
2020
- 2020-08-21 CN CN202010849479.1A patent/CN114077302A/zh active Pending
-
2021
- 2021-07-21 WO PCT/CN2021/107634 patent/WO2022037355A1/zh unknown
- 2021-07-21 EP EP21857450.7A patent/EP4195004A4/en active Pending
- 2021-07-21 US US18/042,100 patent/US20230333384A1/en active Pending
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130021373A1 (en) * | 2011-07-22 | 2013-01-24 | Vaught Benjamin I | Automatic Text Scrolling On A Head-Mounted Display |
CN103941875A (zh) * | 2014-05-05 | 2014-07-23 | 成都理想境界科技有限公司 | 一种翻页方法、装置及终端 |
CN105573483A (zh) * | 2014-11-06 | 2016-05-11 | 李妍 | 头戴式显示装置 |
KR20160062799A (ko) * | 2014-11-25 | 2016-06-03 | 주식회사 이랜텍 | 보안 성능이 강화된 스마트 안경 |
CN105807798A (zh) * | 2014-12-31 | 2016-07-27 | 上海乐相科技有限公司 | 一种头戴式智能眼镜抖动控制方法及装置 |
CN106484103A (zh) * | 2016-09-19 | 2017-03-08 | 上海斐讯数据通信技术有限公司 | 智能终端的控制方法、系统及智能终端 |
CN206440890U (zh) * | 2016-12-14 | 2017-08-25 | 无锡云瞳信息科技有限公司 | 可穿戴分离式智能眼镜 |
CN107515670A (zh) * | 2017-01-13 | 2017-12-26 | 维沃移动通信有限公司 | 一种实现自动翻页的方法及移动终端 |
CN107133002A (zh) * | 2017-03-22 | 2017-09-05 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
CN110096132A (zh) * | 2018-01-30 | 2019-08-06 | 北京亮亮视野科技有限公司 | 一种消除智能眼镜消息通知的方法与智能眼镜 |
CN110716635A (zh) * | 2018-07-13 | 2020-01-21 | 幻视互动(北京)科技有限公司 | 一种多传感器协同获取头部指令的方法及混合现实智能眼镜 |
CN109407858A (zh) * | 2018-09-29 | 2019-03-01 | 深圳前海格物致知科技有限公司 | 一种智能眼镜 |
Also Published As
Publication number | Publication date |
---|---|
EP4195004A4 (en) | 2024-01-31 |
EP4195004A1 (en) | 2023-06-14 |
WO2022037355A1 (zh) | 2022-02-24 |
US20230333384A1 (en) | 2023-10-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10460636B2 (en) | Control of selective actuation of a light filter array | |
US11694590B2 (en) | Dynamic user interface with time indicator | |
US11921992B2 (en) | User interfaces related to time | |
US9886086B2 (en) | Gesture-based reorientation and navigation of a virtual reality (VR) interface | |
JP5174704B2 (ja) | 画像処理装置および画像処理方法 | |
EP3776139A2 (en) | User interfaces for watches | |
US20020044152A1 (en) | Dynamic integration of computer generated and real world images | |
WO2018004735A1 (en) | Generating visual cues related to virtual objects in an augmented and/or virtual reality environment | |
US20170229100A1 (en) | Portable device and control method therefor | |
EP3629133B1 (en) | Interface interaction apparatus and method | |
JP2013150129A (ja) | 携帯端末 | |
JPWO2015170520A1 (ja) | 情報処理システムおよび情報処理方法 | |
US20140313218A1 (en) | Method and apparatus for controlling transparency in portable terminal having transparent display unit | |
CA2791609A1 (en) | Method of presenting digital data on an electronic device operating under different environmental conditions | |
CN109521933A (zh) | 一种显示控制方法及移动终端 | |
CN109495641A (zh) | 一种提醒方法及移动终端 | |
US20230221845A1 (en) | User interfaces for managing weather information | |
CN111314616A (zh) | 图像获取方法、电子设备、介质及可穿戴设备 | |
US20160252725A1 (en) | Electronic device and control method thereof | |
CN114077302A (zh) | 一种智能眼镜及其交互方法和交互装置 | |
KR20160079444A (ko) | 디지털 디바이스 및 그 제어 방법 | |
US10911090B2 (en) | Portable terminal, and control method | |
JP6435393B1 (ja) | 電子機器、制御方法、及び制御プログラム | |
US20240028112A1 (en) | Image display device and image display method | |
US20240159554A1 (en) | Navigational user interfaces |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |