CN106557166A - 智能眼镜及其控制方法、控制装置 - Google Patents

智能眼镜及其控制方法、控制装置 Download PDF

Info

Publication number
CN106557166A
CN106557166A CN201611036890.7A CN201611036890A CN106557166A CN 106557166 A CN106557166 A CN 106557166A CN 201611036890 A CN201611036890 A CN 201611036890A CN 106557166 A CN106557166 A CN 106557166A
Authority
CN
China
Prior art keywords
user
extension information
word
intelligent glasses
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611036890.7A
Other languages
English (en)
Inventor
张义荣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Qinggan Intelligent Technology Co Ltd
Original Assignee
Shanghai Qinggan Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Qinggan Intelligent Technology Co Ltd filed Critical Shanghai Qinggan Intelligent Technology Co Ltd
Priority to CN201611036890.7A priority Critical patent/CN106557166A/zh
Publication of CN106557166A publication Critical patent/CN106557166A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/248Presentation of query results
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/951Indexing; Web crawling techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Computational Linguistics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种智能眼镜及其控制方法、控制装置,所述控制方法包括:当检测到用户的眼睛注视同一方向的时长超过预设时长时,计算所述用户的视角;获取所述用户的视角所对应的图像;提取所述获取到的图像中的文字;根据所述提取到的文字,获取与所述提取到的文字所对应的扩展信息;将获取到的所述扩展信息输出。采用上述方案,可以提高用户感兴趣信息获取的便捷性。

Description

智能眼镜及其控制方法、控制装置
技术领域
本发明涉及智能穿戴设备技术领域,尤其涉及一种智能眼镜及其控制方法、控制装置。
背景技术
智能眼镜是指与智能手机类似,具有独立的操作系统,用户可以安装软件、游戏等软件服务商提供的程序,可通过语音或动作操控完成添加日程、地图导航、与好友互动、拍摄照片和视频以及与朋友展开视频通话等功能,并可以通过移动通讯网络来实现无线网络接入的这样一类眼镜的总称。
在现实生活中,经常会出现用户对一些事物比较感兴趣,有进一步对某些事物进行深入了解的需求。然而由于用户自身知识储备的限制,用户在进一步了解某些事物时,常常向当地人询问,或借助于手机、平板等工具在互联网上进行查询,用户获取感兴趣信息的过程较为繁琐。
发明内容
本发明解决的技术问题是如何便捷的获取用户感兴趣的信息。
为解决上述技术问题,本发明实施例提供一种智能眼镜的控制方法,包括:当检测到用户的眼睛注视同一方向的时长超过预设时长时,计算所述用户的视角;获取所述用户的视角所对应的图像;提取所述获取到的图像中的文字;根据所述提取到的文字,获取与所述提取到的文字所对应的扩展信息;将获取到的所述扩展信息输出。
可选地,所述计算所述用户的视角,包括:根据所述用户的眼睛的瞳孔中心位置、所述用户的眼睛的上/下眼白长度以及所述用户的眼睛的左侧/右侧眼白长度,计算所述用户的视角。
可选地,所述获取与提取到的文字所对应的扩展信息,包括:获取所述提取到的文字所对应的关键词;根据所述关键词,从本地数据库中查找与所述关键词对应的扩展信息。
可选地,所述获取与提取到的文字所对应的扩展信息,包括:获取所述提取到的文字所对应的关键词;将所述关键词发送至云端服务器,使得所述云端服务器获取所述关键词所对应的扩展信息;接收所述云端服务器返回的所述扩展信息。
可选地,所述将获取到的所述扩展信息输出包括以下至少一种:采用图像方式将获取到的所述扩展信息输出;采用音频方式将获取到的所述扩展信息输出。
可选地,所述采用图像方式将获取到的所述扩展信息输出,包括:获取所述用户的视角所对应的物体与所述用户的距离;根据所述用户的视角所对应的物体的距离,得到获取所述用户的视角所对应的图像时的焦距;采用图像方式将所述扩展信息以相同的焦距输出。
可选地,所述获取所述用户的视角所对应的图像之后,还包括:根据获取到的图像,获取与所述图像对应的扩展信息并输出。
在本发明实施例中,还提供了一种智能眼镜控制装置,包括:检测单元,适于检测用户的眼睛注视方向;计算单元,适于当检测到用户的眼睛注视同一方向的时长超过预设时长时,计算所述用户的视角;第一获取单元,适于获取所述用户的视角所对应的图像;提取单元,适于提取所述获取到的图像中的文字;第二获取单元,适于根据所述提取到的文字,获取与所述提取到的文字所对应的扩展信息;输出单元,适于将获取到的所述扩展信息输出。
在本发明实施例中,还提供了一种智能眼镜,包括:智能眼镜本体、控制器、内侧摄像头及外侧摄像头,其中:所述内侧摄像头,设置在所述智能眼镜本体上,与所述控制器耦接,适于检测用户的眼睛的注视方向;所述控制器,适于当所述内侧摄像头检测到所述用户的眼睛的注视同一方向的时长超过预设时长时,计算所述用户的视角,并生成控制信号发送至所述外侧摄像头,获取所述外侧摄像头采集的图像,提取所述获取到的图像中的文字,以及获取与所述提取到的文字所对应的扩展信息并输出。
可选地,所述智能眼镜还包括:通信单元;所述通信单元,适于与云端服务器进行通信;所述控制器,适于获取所述提取到的文字所对应的关键词,将所述关键词通过所述通信单元发送至所述云端服务器,使得所述云端服务器获取所述关键词所对应的扩展信息,通过所述通信单元接收所述云端服务器返回的所述扩展信息。
可选地,所述控制器,还适于根据获取到的图像,获取与所述图像对应的扩展信息。
可选地,所述智能眼镜还包括:投影装置;所述投影装置,与所述控制器耦接,适于通过投影输出所述扩展信息;所述控制器,还适于控制所述投影装置将所述扩展信息投影输出。
可选地,所述控制器,还适于获取所述外侧摄像头采集所述用户的视角所对应的图像时的焦距;所述投影装置,适于将所述扩展信息以相同的焦距输出。
可选地,所述智能眼镜还包括:语音输出装置;所述语音输出装置,与所述控制器耦接,适于通过语音方式输出所述扩展信息;所述控制器,还适于在接收到语音输出控制指令时,控制所述语音输出装置以语音方式将所述扩展信息输出。
与现有技术相比,本发明实施例的技术方案具有以下有益效果:
通过检测用户的眼睛的注视时长及注视方向,获取与用户的视角对应的图像,提取用户的视角所对应的图像中的文字,获取与提取到的文字所对应的扩展信息。在获取用户的视角所对应图像以及对应的扩展信息的过程中,用户无须进行手动操作,即可获取看到内容对应的扩展信息,从而可以提高用户感兴趣信息获取的便捷性。
进一步,可以根据获取到的图像,获取到与所述图像对应的扩展信息,采用以图查找扩展信息的方式,可以简化扩展信息的获取流程。
附图说明
图1是本发明实施例中的一种智能眼镜的控制方法的流程图;
图2是本发明实施例中的一种智能眼镜控制装置的结构示意图;
图3是本发明实施例中的一种智能眼镜的结构示意图。
具体实施方式
在现实生活中,经常会出现用户对一些事物比较感兴趣,有进一步对某些事物进行深入了解的需求。然而由于用户自身知识储备的限制,用户在进一步了解某些事物时,常常向当地人询问,或借助于手机、平板等工具在互联网上进行查询,用户获取感兴趣信息的过程较为繁琐。
在本发明实施例中,通过检测用户的眼睛的注视时长及注视方向,获取与用户的视角对应的图像,提取用户的视角所对应的图像中的文字,获取与提取到的文字所对应的扩展信息。在获取用户的视角所对应图像以及对应的扩展信息的过程中,用户无须进行手动操作,即可获取看到内容对应的扩展信息,从而可以提高用户感兴趣信息获取的便捷性。
为使本发明的上述目的、特征和有益效果能够更为明显易懂,下面结合附图对本发明的具体实施例做详细的说明。
参照图1,给出了本发明实施例中的一种智能眼镜的控制方法的流程图,以下通过具体步骤进行详细说明。
在具体实施中,本发明实施例中提供的智能眼镜中可以设置有内侧摄像头、外侧摄像头以及控制器。在本发明一实施例中,内侧摄像头设置在智能眼镜本体的右侧支架上,镜头面向用户眼睛,工作时可以对用户的眼睛进行实时追踪。外侧摄像头设置在智能眼镜本体的右侧支架上,镜头面向外界,工作时可以实时采集外界的图像。控制器可以接收内侧摄像头及外侧摄像头采集的图像,并可以对内侧摄像头及外侧摄像头进行控制。
在具体实施中,内侧摄像头也可以设置在智能眼镜的左侧支架上,外侧摄像头也可以设置在智能眼镜的左侧支架上。内侧摄像头与外侧摄像头还可以分别设置在两侧支架上,例如,内侧摄像头设置在智能眼镜的左侧支架上,外侧摄像头设置在智能眼镜的右侧支架上。
步骤S11,当检测到用户的眼睛注视同一方向的时长超过预设时长时,计算所述用户的视角。
在具体实施中,用户可以通过多种方式开启智能眼镜的扩展信息查询功能。
例如,用户可以通过语音方式开启智能眼镜的扩展信息查询功能。用户可以通过语音“开启扩展信息查询”,来开启智能眼镜的扩展信息查询功能。
又如,用户可以通过预设动作触发开启智能眼镜的扩展信息查询功能。如通过动作“√”开启智能眼镜的扩展信息查询功能;或者通过连续的眨眼动作,如连续眨眼三次,可开启智能眼镜的扩展信息查询功能。
当智能眼镜的扩展信息查询功能开启后,内侧摄像头可以对用户的眼睛实时进行追踪,对用户到的眼睛的运动信息进行捕捉,并且可以将捕捉到的用户的眼睛的运动信息发送至控制器。
控制器接收内侧摄像头发送的用户的眼睛的运动信息后,可以根据接收到的用户的眼睛的运动信息,来获知用户的眼睛的注视方向。当检测到用户的眼睛的运动信息处于某一状态达到预设时长,则可以判定用户注视同一方向的时长超过预设时长,计算用户的视角。
人的眼睛近似球形,位于眼眶内。眼球包括眼球壁、眼内腔和内容物、神经、血管等组织。眼球壁主要分为外层、中层及内层。眼球壁外层由角膜、巩膜组成。眼球壁外层的前1/6为透明的角膜,俗称“眼珠”,其余5/6为白色的巩膜,俗称“眼白”。
在实际应用中,智能眼镜中可以设置有眼睛运动信息采集传感器,通过预设的眼睛运动信息采集传感器来采集用户的眼睛参数,并将采集到的用户的眼睛参数发送至控制器。在本发明实施例中,用户的眼睛参数可以包括:瞳孔的中心位置以及上/下眼白长度及左侧/右侧眼白长度。
控制器可以根据眼睛运动信息采集传感器发送的用户的眼睛参数,瞳孔的中心位置、上眼白长度以及左侧眼白长度,结合预存储的用户正视时对应的眼睛参数,计算用户的视角。控制器也可以根据瞳孔的中心位置、上眼白长度以及右侧眼白长度,结合预存储的用户正视时对应的眼睛参数,计算用户的视角。控制器还可以根据瞳孔的中心位置、上眼白长度、下眼白长度、左侧眼白长度以及右侧眼白长度,结合预存储的用户正视时对应的眼睛参数,计算用户的视角。需要说明的是,控制器可以根据瞳孔中心的位置,上眼白长度与下眼白长度中的至少一个、以及左侧眼白与右侧眼白中的至少一个,计算用户的视角。
在实际应用中,预设时长可以为2秒,也可以为5秒,还可以为其他设定值。预设时长的具体设定值用户可以根据自身需要及实际的应用场景进行设定。
例如,用户在参观历史博物馆时,想要对陈列的展品进行全面详细的了解,但由于对历史博物馆中陈列的展品了解较少,则可以将预设时长设置为2秒,用户的视线在感兴趣的展品停留2秒,就可以获取到感兴趣的展品对应的扩展信息,从而用户可以更快的获取感兴趣的展品对应的扩展信息。
又如,用户在参观历史博物馆时,只是对展品进行大致的浏览,可以将预设时长设置为5秒,用户在对展品进行浏览的时候,在用户对某一件展品感兴趣时,且用户的视线在感兴趣的展品上停留时长超过5秒,才会获取与该展品对应的扩展信息,从而可以减小对用户的干扰。
步骤S12,获取所述用户的视角所对应的图像。
在具体实施中,当控制器获取到用户的视角后,可以控制外侧摄像头开始工作,并控制外侧摄像头的取景方向为用户的视角对应的方向。
控制器获取到用户的视角后,可以生成用于控制外侧摄像头开始工作的控制信号,并发送至外侧摄像头。外侧摄像头接收到控制信号后开始工作,采集用户的视角所对应方向上的图像,并将采集到的图像发送至控制器。
步骤S13,提取所述获取到的图像中的文字。
控制器接收到外侧摄像头发送的图像后,可以对获取到的图像进行处理,从中提取文字。
在实际应用中,控制器将获取到的图像二值化处理,所述二值化处理是指设定一个全局的阈值T,用T将图像的数据分成两部分:大于T的像素群和小于T的像素群。将大于T的像素群的像素值设定为白色(或者黑色),小于T的像素群的像素值设定为黑色(或者白色),然后在二值化图像的连通域中提取文字行,进而可以提取到图像中的文字。
步骤S14,根据所述提取到的文字,获取与所述提取到的文字所对应的扩展信息。
在具体实施中,在控制器获取到图像中的文字之后,还可以提取图像中的文字对应的关键词。关键词可以为人名、地名、物体名称以及建筑物名称等名词。
在获取到关键词后,可以从本地数据库中获取与关键词对应的扩展信息。也可以从云端服务器获取与关键词对应的扩展信息。扩展信息可以为与关键词相关联的一些信息。
在具体实施中,智能眼镜中可以设置有通信单元,在智能眼镜接入网络时,可以通过通信单元将提取到的文字对应的关键词发送至云端服务器。云端服务器可以根据接收到的关键词获取对应的扩展信息,并将获取到的扩展信息返回至智能眼镜。智能眼镜可以通过通信单元接收云端服务器返回的扩展信息。
例如,关键词为人名,对应的扩展信息可以包括:该人名对应人物的生平、生活、精神、经历及事迹等。又如,关键词为景点名称,对应的扩展信息可以包括:景点所处位置、景点名称由来、相关典故、景点特色及周边美食等。再如,关键词为道路名,对应的扩展信息可以包括:道路的交通路况、道路的通行信息及限速信息等。
例如,用户对看到一个人形的玉制品比较感兴趣,当智能眼镜中的控制器检测到用户注视该玉制品旁边的铭牌“玉神人”的时长达到预设时长时,控制外侧摄像头获取铭牌“玉神人”的图像,并提取出图像中的文字“玉神人”。在智能眼镜接入网络时,将提取到的文字发送至云端服务器。云端服务器接收到智能眼镜发送的提取到的文字“玉神人”后,可以获取与“玉神人”相关的扩展信息。“玉神人”相关的扩展信息可以为:玉神人,石家河文化公元前24世纪~公元前20世纪,圆雕、青玉质、晶莹剔透且保存完整,制造工艺非常高超。玉神人面部造型奇特,斜橄榄形眼,蒜头大鼻,阔嘴紧闭,表情庄严,头戴平顶冠,耳戴一对耳环,双手放在胸前,被认为是古代巫师正在做法、通神的形象,是海内外同类传世玉器中最为精美的一件。
又如,智能眼镜中的控制器检测到用户注视淮海中路的路标时长超过预设时长,可以获取淮海中路路标的图像,并从图像中提取文字“淮海中路”。根据提取到的文字“淮海中路”获取相关的扩展信息,扩展信息中可以包括:道路通行信息、限速信息、当前交通拥堵路况及淮海中路的历史介绍等。
步骤S15,将获取到的所述扩展信息输出。
在具体实施中,可以采用多种方式输出所述扩展信息。例如,可以采用图像方式输出所述扩展信息,也可以采用音频方式输出所述扩展信息,还可以其他方式输出所述扩展信息。在采用音频方式输出所述扩展信息时,可以将扩展信息对应的文字信息转换成对应的语音数据输出,也可以在扩展信息为音频数据时,直接通过音频方式输出。
在具体实施中,获取用户的视角对应的物体与所述用户的距离,并根据所述用户的视角所对应的物体的距离,得到获取所述用户的视角所对应的图像时的焦距。采用图像方式将所述扩展信息以与相同的焦距输出。
在本发明一实施例中,当获取到用户的视角之后,获取至少两张用户的视角对应物体的图像,且每张图像的景深不同。根据获取到的同一物体的不同景深的图像,可以获取到用户距离该物体的距离。根据用户距离该物体的距离以及采集到的图像,可以得到采集该物体时的焦距。将获取到的扩展信息以图像方式,且采用与获取该物体时相同的焦距输出。根据用户的视角,将输出的图像显示在预设的区域内,以避免输出的扩展信息距离采集到的物体距离过远或者重合。扩展信息对应的图像经投影装置投影输出后,用户注视的物体与显示屏显示的扩展信息处于同一平面,便于用户查看,从而使得用户看到的效果,就像是在物体旁边设置有一个显示屏一样,从而提高用户体验。
可以理解的是,还可以采用图像与音频的组合方式输出所述扩展信息。
在具体实施中,在智能眼镜中可以设置有投影装置。投影装置与控制器耦接,设置在智能眼镜的一侧支架上,可以根据控制器发送的输出信号,将输出的扩展信息进行投影。用户可以在镜片的对应位置处看到投影装置投影的扩展信息。投影装置可以将扩展信息以图像方式进行投影显示,其中,投影输出的图像可以为文本形式,也可以为图片形式。
在智能眼镜中还可以设置有音频输出接口,用户可以通过耳机、音响或者其他外接设备收听音频方式输出扩展信息。在智能眼镜中也可以设置有扬声器,可以通过外音的方式输出扩展信息,还可以采用骨传导式耳机设备,接收输出的音频形式的扩展信息。
例如,可以将获取到的与“玉神人”相关的扩展信息的文字数据转换成对应的语音数据,并以音频的方式通过扬声器输出。用户通过智能眼镜输出的音频形式的“玉神人”相关的扩展信息,获知与“玉神人”相关的情况。
由此可见,通过检测用户的眼睛的注视时长及注视方向,获取与用户的视角对应的图像,提取用户的视角所对应的图像中的文字,获取与提取到的文字所对应的扩展信息。在获取用户的视角所对应图像以及对应的扩展信息的过程中,用户无须进行手动操作,即可获取看到内容对应的扩展信息,从而可以提高用户感兴趣信息获取的便捷性。
在具体实施中,可能存在用户感兴趣的内容只是一件物品,获取到的图像中并不存在文字,此时,控制器可以根据获取到的图像,从本地数据库中查找与所述图像对应的扩展信息;也可以将获取到的图像发送至云端服务器,云端服务器在接收到图像后,查找与所述图像对应的扩展信息,并可以将查找到的扩展信息返回至控制器。控制器接收到云端服务器返回的扩展信息后,可以将扩展信息进行输出。
采用以图查找对应的扩展信息的方式,可以简化扩展信息的获取流程。
参照图2,给出了本发明实施例中的一种智能眼镜控制装置的结构示意图。智能眼镜控制装置20可以包括:检测单元21、计算单元22、第一获取单元23、提取单元24、第二获取单元25及输出单元26。
检测单元21,适于检测用户的眼睛的注视方向;
计算单元22,适于当检测到用户的眼睛注视同一方向的时长超过预设时长时,计算所述用户的视角;
第一获取单元23,适于获取所述用户的视角所对应的图像;
提取单元24,适于提取所述获取到的图像中的文字;
第二获取单元25,适于根据所述提取到的文字,获取与所述提取到的文字所对应的扩展信息;
输出单元26,适于将获取到的所述扩展信息输出。
参照图3,给出了本发明实施例中的一种智能眼镜。智能眼镜30包括智能眼镜本体31、控制器(未示出)、内侧摄像头(未示出)及外侧摄像头32,其中:
所述内侧摄像头,设置在所述智能眼镜本体31上,与所述控制器耦接,适于检测用户的眼睛的注视方向;
在本发明一实施例中,内侧摄像头设置在智能眼镜本体的右侧支架上,镜头朝向用户眼睛,可以实时跟踪用户的眼睛的运动,以检测用户的眼睛的注视方向。
所述控制器,适于当所述内侧摄像头检测到所述用户的眼睛的注视同一方向的时长超过预设时长时,计算所述用户的视角,并生成控制信号发送至所述外侧摄像头32,获取所述外侧摄像头32采集的图像,提取所述获取到的图像中的文字,以及获取与所述提取到的文字所对应的扩展信息并输出;
所述外侧摄像头32,设置在所述智能眼镜本体31上,与所述控制器耦接,适于接收到所述控制信号后开始工作,并根据所述控制信号采集所述用户的视角所对应的图像。
在本发明一实施例中,外侧摄像头32设置在智能眼镜本体31上的右侧支架上,外侧摄像头32的镜头朝向外界,可以采集外界的图像。
在具体实施中,智能眼镜30还可以包括通信单元(未示出),智能眼镜可以通过通信单元与云端服务器进行通信;控制器,适于将所述提取到的文字对应的关键词通过通信单元发送至云端服务器,使得所述云端服务器根据提取到的文字对应的关键词获取对应的扩展信息,以及通过通信单元接收云端服务器返回的扩展信息。
在具体实施中,智能眼镜30中还可以设置有投影装置33。投影装置33与所述控制器耦接,适于通过投影输出所述扩展信息;所述控制器,还适于控制所述投影装置33将所述扩展信息输出。
在具体实施中,所述控制器,还适于获取所述外侧摄像头32采集所述用户的视角所对应的图像时的焦距;所述投影装置33,适于将所述扩展信息以相同的焦距输出。
在本发明一实施例中,投影装置33设置在智能眼镜本体31的右侧支架上,可以将扩展信息投影输出。投影装置33可以包括:照明灯、光导管、偏振光束分离器及硅上液晶面板。控制器将扩展信息输出至硅上液晶面板。在照明灯照射下,硅上液晶面板上显示的扩展信息产生的光经光导管传输到偏振光束分离器,用户在观看区域即可以看到输出的扩展信息。
在具体实施中,智能眼镜30中还可以设置有语音输出装置(未示出)。语音输出装置与所述控制器耦接,适于通过语音方式输出所述扩展信息;所述控制器,还适于当接收到语音输出控制指令时,控制所述语音输出装置以语音方式将所述扩展信息输出。
在实际应用中,语音输出装置可以为扬声器、音响、耳机或者其他可以将音频进行输出的装置。
例如,语音输出装置为蓝牙耳机,蓝牙耳机与智能眼镜上均包括蓝牙通信单元,蓝牙耳机与智能眼镜之间通过蓝牙通信单元进行通信。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:ROM、RAM、磁盘或光盘等。
虽然本发明披露如上,但本发明并非限定于此。任何本领域技术人员,在不脱离本发明的精神和范围内,均可作各种更动与修改,因此本发明的保护范围应当以权利要求所限定的范围为准。

Claims (14)

1.一种智能眼镜的控制方法,其特征在于,包括:
当检测到用户的眼睛注视同一方向的时长超过预设时长时,计算所述用户的视角;
获取所述用户的视角所对应的图像;
提取所述获取到的图像中的文字;
根据所述提取到的文字,获取与所述提取到的文字所对应的扩展信息;
将获取到的所述扩展信息输出。
2.根据权利要求1所述的智能眼镜的控制方法,其特征在于,所述计算所述用户的视角,包括:
根据所述用户的眼睛的瞳孔中心位置、所述用户的眼睛的上/下眼白长度以及所述用户的眼睛的左侧/右侧眼白长度,计算所述用户的视角。
3.根据权利要求1所述的智能眼镜的控制方法,其特征在于,所述获取与提取到的文字所对应的扩展信息,包括:
获取所述提取到的文字所对应的关键词;
根据所述关键词,从本地数据库中查找与所述关键词对应的扩展信息。
4.根据权利要求1所述的智能眼镜的控制方法,其特征在于,所述获取与提取到的文字所对应的扩展信息,包括:
获取所述提取到的文字所对应的关键词;
将所述关键词发送至云端服务器,使得所述云端服务器获取所述关键词所对应的扩展信息;
接收所述云端服务器返回的所述扩展信息。
5.根据权利要求1所述的智能眼镜的控制方法,其特征在于,所述将获取到的所述扩展信息输出包括以下至少一种:
采用图像方式将获取到的所述扩展信息输出;
采用音频方式将获取到的所述扩展信息输出。
6.根据权利要求5所述的智能眼镜的控制方法,其特征在于,所述采用图像方式将获取到的所述扩展信息输出,包括:
获取所述用户的视角所对应的物体与所述用户的距离;
根据所述用户的视角所对应的物体的距离,得到获取所述用户的视角所对应的图像时的焦距;
采用图像方式将所述扩展信息以相同的焦距输出。
7.根据权利要求1所述的智能眼镜的控制方法,其特征在于,所述获取所述用户的视角所对应的图像之后,还包括:根据获取到的图像,获取与所述图像对应的扩展信息并输出。
8.一种智能眼镜控制装置,其特征在于,包括:
检测单元,适于检测用户的眼睛注视方向;
计算单元,适于当检测到用户的眼睛注视同一方向的时长超过预设时长时,计算所述用户的视角;
第一获取单元,适于获取所述用户的视角所对应的图像;
提取单元,适于提取所述获取到的图像中的文字;
第二获取单元,适于根据所述提取到的文字,获取与所述提取到的文字所对应的扩展信息;
输出单元,适于将获取到的所述扩展信息输出。
9.一种智能眼镜,其特征在于,包括智能眼镜本体、控制器、内侧摄像头及外侧摄像头,其中:
所述内侧摄像头,设置在所述智能眼镜本体上,与所述控制器耦接,适于检测用户的眼睛的注视方向;
所述控制器,适于当所述内侧摄像头检测到所述用户的眼睛的注视同一方向的时长超过预设时长时,计算所述用户的视角,并生成控制信号发送至所述外侧摄像头,获取所述外侧摄像头采集的图像,提取所述获取到的图像中的文字,以及获取与所述提取到的文字所对应的扩展信息并输出。
10.根据权利要求9所述的智能眼镜,其特征在于,还包括:通信单元;
所述通信单元,适于与云端服务器进行通信;
所述控制器,适于获取所述提取到的文字所对应的关键词,将所述关键词通过所述通信单元发送至所述云端服务器,使得所述云端服务器获取所述关键词所对应的扩展信息,通过所述通信单元接收所述云端服务器返回的所述扩展信息。
11.根据权利要求9所述的智能眼镜,其特征在于,所述控制器,还适于根据获取到的图像,获取与所述图像对应的扩展信息。
12.根据权利要求9所述的智能眼镜,其特征在于,还包括:投影装置;
所述投影装置,与所述控制器耦接,适于通过投影输出所述扩展信息;
所述控制器,还适于控制所述投影装置将所述扩展信息投影输出。
13.根据权利要求12所述的智能眼镜,其特征在于,所述控制器,还适于获取所述外侧摄像头采集所述用户的视角所对应的图像时的焦距;
所述投影装置,适于将所述扩展信息以相同的焦距输出。
14.根据权利要求9所述的智能眼镜,其特征在于,还包括:语音输出装置;
所述语音输出装置,与所述控制器耦接,适于通过语音方式输出所述扩展信息;
所述控制器,还适于在接收到语音输出控制指令时,控制所述语音输出装置以语音方式将所述扩展信息输出。
CN201611036890.7A 2016-11-23 2016-11-23 智能眼镜及其控制方法、控制装置 Pending CN106557166A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611036890.7A CN106557166A (zh) 2016-11-23 2016-11-23 智能眼镜及其控制方法、控制装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611036890.7A CN106557166A (zh) 2016-11-23 2016-11-23 智能眼镜及其控制方法、控制装置

Publications (1)

Publication Number Publication Date
CN106557166A true CN106557166A (zh) 2017-04-05

Family

ID=58444938

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611036890.7A Pending CN106557166A (zh) 2016-11-23 2016-11-23 智能眼镜及其控制方法、控制装置

Country Status (1)

Country Link
CN (1) CN106557166A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107092873A (zh) * 2017-04-08 2017-08-25 闲客智能(深圳)科技有限公司 一种眼动方向识别方法及装置
CN107508989A (zh) * 2017-08-25 2017-12-22 北京小米移动软件有限公司 信息记录的方法、装置及系统
CN108875691A (zh) * 2018-07-03 2018-11-23 京东方科技集团股份有限公司 一种辅助购物装置及辅助购物方法
CN109144465A (zh) * 2018-08-30 2019-01-04 Oppo广东移动通信有限公司 语音播放方法、装置、穿戴式设备及存储介质
CN109725726A (zh) * 2018-12-29 2019-05-07 上海掌门科技有限公司 一种查询方法和装置
CN110286753A (zh) * 2019-06-11 2019-09-27 福建天泉教育科技有限公司 视频关注度判断方法、存储介质
CN110334712A (zh) * 2019-06-11 2019-10-15 广州市小篆科技有限公司 智能穿戴终端、云端服务器和数据处理方法
CN111200768A (zh) * 2018-11-20 2020-05-26 天地通科技有限责任公司 一种能定位讲解骨传导耳机

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102984530A (zh) * 2011-09-02 2013-03-20 宏达国际电子股份有限公司 图像处理系统及自动对焦方法
CN103856590A (zh) * 2012-12-05 2014-06-11 Lg电子株式会社 眼镜式移动终端
CN104036270A (zh) * 2014-05-28 2014-09-10 王月杰 一种即时自动翻译装置及方法
CN104793735A (zh) * 2014-01-16 2015-07-22 卡西欧计算机株式会社 显示系统、显示终端以及显示方法
US20150338652A1 (en) * 2014-05-26 2015-11-26 Lg Electronics Inc. Eyewear type terminal and control method thereof

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102984530A (zh) * 2011-09-02 2013-03-20 宏达国际电子股份有限公司 图像处理系统及自动对焦方法
CN103856590A (zh) * 2012-12-05 2014-06-11 Lg电子株式会社 眼镜式移动终端
CN104793735A (zh) * 2014-01-16 2015-07-22 卡西欧计算机株式会社 显示系统、显示终端以及显示方法
US20150338652A1 (en) * 2014-05-26 2015-11-26 Lg Electronics Inc. Eyewear type terminal and control method thereof
CN104036270A (zh) * 2014-05-28 2014-09-10 王月杰 一种即时自动翻译装置及方法

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107092873A (zh) * 2017-04-08 2017-08-25 闲客智能(深圳)科技有限公司 一种眼动方向识别方法及装置
CN107508989A (zh) * 2017-08-25 2017-12-22 北京小米移动软件有限公司 信息记录的方法、装置及系统
CN108875691A (zh) * 2018-07-03 2018-11-23 京东方科技集团股份有限公司 一种辅助购物装置及辅助购物方法
CN109144465A (zh) * 2018-08-30 2019-01-04 Oppo广东移动通信有限公司 语音播放方法、装置、穿戴式设备及存储介质
CN111200768A (zh) * 2018-11-20 2020-05-26 天地通科技有限责任公司 一种能定位讲解骨传导耳机
CN109725726A (zh) * 2018-12-29 2019-05-07 上海掌门科技有限公司 一种查询方法和装置
CN110286753A (zh) * 2019-06-11 2019-09-27 福建天泉教育科技有限公司 视频关注度判断方法、存储介质
CN110334712A (zh) * 2019-06-11 2019-10-15 广州市小篆科技有限公司 智能穿戴终端、云端服务器和数据处理方法
CN110286753B (zh) * 2019-06-11 2022-06-07 福建天泉教育科技有限公司 视频关注度判断方法、存储介质

Similar Documents

Publication Publication Date Title
CN106557166A (zh) 智能眼镜及其控制方法、控制装置
AU2016262576B2 (en) Privacy-sensitive consumer cameras coupled to augmented reality systems
CN204595327U (zh) 头戴式显示装置
US10019962B2 (en) Context adaptive user interface for augmented reality display
US11825012B2 (en) Server, client terminal, control method, and storage medium
US8531394B2 (en) Unitized, vision-controlled, wireless eyeglasses transceiver
CN105141331B (zh) 一种眼镜式通信装置、系统及方法
CN104898276A (zh) 头戴式显示装置
CN106774836A (zh) 智能眼镜及其控制方法、控制装置
US20140104392A1 (en) Generating image information
CN105763829A (zh) 一种图像处理方法及电子设备
CN204595329U (zh) 头戴式显示装置
CN105607263A (zh) 头戴式电子设备
EP3368962B1 (en) Method and system for interaction using holographic display system
CN104865705A (zh) 一种基于智能移动设备的增强现实头戴设备
US20190265787A1 (en) Real world interaction utilizing gaze
CN108124150A (zh) 虚拟现实头戴显示设备及通过其观察真实场景的方法
CN204595328U (zh) 头戴式显示装置
US20210063746A1 (en) Information processing apparatus, information processing method, and program
WO2016086438A1 (zh) 针对视觉障碍患者的头戴式多媒体终端辅助观看系统
CN104484051B (zh) 基于穿戴式眼镜视线的室内实时营销指挥方法和系统
CN107015364A (zh) 一种具有3d影像功能的智能眼镜
CN104767972A (zh) 一种视觉缺陷帮助系统及方法
CN205038405U (zh) 封闭式头戴增强现实设备
CN104239877A (zh) 图像处理的方法和图像采集设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170405

RJ01 Rejection of invention patent application after publication