CN107193381A - 一种基于眼球追踪传感技术的智能眼镜及其显示方法 - Google Patents
一种基于眼球追踪传感技术的智能眼镜及其显示方法 Download PDFInfo
- Publication number
- CN107193381A CN107193381A CN201710397300.1A CN201710397300A CN107193381A CN 107193381 A CN107193381 A CN 107193381A CN 201710397300 A CN201710397300 A CN 201710397300A CN 107193381 A CN107193381 A CN 107193381A
- Authority
- CN
- China
- Prior art keywords
- module
- signal
- display
- interface
- intelligent glasses
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 210000005252 bulbus oculi Anatomy 0.000 title claims abstract description 61
- 239000011521 glass Substances 0.000 title claims abstract description 41
- 238000005516 engineering process Methods 0.000 title claims abstract description 16
- 238000000034 method Methods 0.000 title claims abstract description 13
- 238000012545 processing Methods 0.000 claims abstract description 54
- 238000004891 communication Methods 0.000 claims abstract description 29
- 210000001508 eye Anatomy 0.000 claims abstract description 7
- 230000003287 optical effect Effects 0.000 claims abstract description 6
- 238000006243 chemical reaction Methods 0.000 claims description 12
- 238000001914 filtration Methods 0.000 claims description 11
- 230000005540 biological transmission Effects 0.000 claims description 9
- 241000721047 Danaus plexippus Species 0.000 claims description 6
- 230000000007 visual effect Effects 0.000 claims description 6
- 210000001747 pupil Anatomy 0.000 claims description 5
- 230000003321 amplification Effects 0.000 claims description 3
- 238000003199 nucleic acid amplification method Methods 0.000 claims description 3
- 241001062009 Indigofera Species 0.000 claims 1
- 210000004556 brain Anatomy 0.000 claims 1
- 230000005611 electricity Effects 0.000 claims 1
- 230000000694 effects Effects 0.000 abstract description 5
- 230000002452 interceptive effect Effects 0.000 abstract description 5
- 238000012546 transfer Methods 0.000 abstract description 4
- 230000006870 function Effects 0.000 description 12
- 230000003993 interaction Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 238000000465 moulding Methods 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000003542 behavioural effect Effects 0.000 description 1
- 238000005094 computer simulation Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005265 energy consumption Methods 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000033001 locomotion Effects 0.000 description 1
- 230000004630 mental health Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 208000024891 symptom Diseases 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/01—Indexing scheme relating to G06F3/01
- G06F2203/012—Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本发明公开了一种基于眼球追踪传感技术的智能眼镜，所述智能眼镜包括眼镜本体、光学波导设备和系统模块，所述系统模块包括眼球追踪传感模块、语音模块、处理模块、控制模块、通信模块和显示模块，所述控制模块分别与通信模块、显示模块和处理模块连接，所述处理模块与语音模块和眼球追踪传感模块连接，本发明还公开了一种智能显示方法，终端设备通过数据连接从网上获取信息，智能眼睛通过通信模块与终端设备直接建立信息连接，控制模块控制通信模块对显示模块的信息传输及显示；本发明更加自然高效的实现用户佩戴智能眼镜的交互体验，快速的定位和查找自己想要的信息，提高体验效果。
Description
技术领域
本发明属于虚拟现实技术领域，更具体地，涉及一种基于眼球追踪传感技术的智能眼镜及其显示方法。
背景技术
增强现实技术是一种将真实世界信息和虚拟世界信息无缝集成的新技术，是把原本在现实世界的一定时间空间范围内很难体验到的实体信息（例如视觉信息、声音、味道及触觉等），通过电脑等科技，模拟仿真后在叠加，将虚拟的信息应用到真实世界来反馈给人。
传统的交互方式多为鼠标等外部设备进行信息的交互，在基于光波导显示技术的智能系统中如果需要用户用手去点击或者通过交互手柄进行操作，这样的交互方式在虚拟环境就不能够达到自然，高效的效果。对于用户的体验没有更大的提升空间。
随着大屏幕智能手机、智能电视、高清电视等逐步普及，计算机图形技术、人机接口、无线传输技术等虚拟现实核心技术以及VR设备的显示、算法、交互技术的发展。给VR技术的提升带来了重大影响，虚拟现实又称虚拟实境。它是利用电脑模拟产生一个三维空间的虚拟世界，并模拟用户的视觉、听觉、触觉等，使用户产生身临其境的感觉。在虚拟现实应用的场景中，通常用户通过佩戴虚拟现实头盔，利用各种传感器来跟踪头部的各种运动，经过行为解释器产生行为数据，然后输入到虚拟环境中，与用户进行交互。
目前随着基于光波导显示技术的智能眼镜的开发，虽然可有效结合机顶盒和电视机，也可针对手机、平板等工具，将其网络信号（包括网页、电视电影、图片等内容）传输到智能眼镜进行观看，但如何在这些传输的信息中自然高效的获取用户想要的信息成为技术的关键。
发明内容
为了克服现有技术的缺陷核问题，本发明设计了一种基于眼球追踪传感技术的智能眼镜及其显示方法。
本发明的技术方案如下：
一种基于眼球追踪传感技术的智能眼镜，包括眼镜本体、用于形成虚拟界面的光学波导设备和系统模块，所述系统模块包括用于获取用户眼球位于所述虚拟界面坐标的眼球追踪传感模块、语音模块、用于对语音模块及眼球追踪传感模块所采集的命令信息进行处理的处理模块、用于接收数字信息并控制显示输出的控制模块、用于与移动终端设备连接的通信模块和显示模块，所述控制模块分别与通信模块、显示模块和处理模块连接，所述处理模块与语音模块和眼球追踪传感模块连接，所述语音模块包括双麦线性阵列的两个麦克风、用于对采集的模拟信号进行放大处理的1号信号放大器与用于信号过滤处理的1号信号过滤器和对过滤处理后的信号进行模数转换的AD转换模块，所述眼球追踪传感模块包括用于采集眼球位置信息的电容传感集、用于对采集的信号进行放大处理的2号信号放大器与用于对放大后的信号进行信号过滤的2号信号过滤器和用于对过滤处理后的信号进行数模转换的AD转换模块。
进一步地，所述虚拟界面预建立有视线模型，所述视线模型以3X3的形式平均分布有9个校准点，所述校准点中心点与用户瞳孔中心的空间坐标对应，所述第一行第一列位置上的校准点与用户内眼角的空间坐标对应，所述虚拟界面中包括多个外挂标签。
更进一步地，所述预设标签可以设置有搜索、刷新、智能提醒等常用的交互功能，通过瞳孔的追踪进行相应的功能选择，可以对虚拟界面进行相应的处理，实现自然的信息交互。
进一步地，所述智能眼镜还包括电源模块和用于控制智能眼镜启动或关闭的电源开关。
进一步地，所述控制模块为君正M200芯片，所述君正M200芯片内嵌一个高性能的XBurst双核CPU、显示屏驱动接口和两路通用异步接收器。
进一步地，所述通信模块包括WiFi模块或蓝牙模块或WiFi模块或蓝牙模块和WiFi模块。
进一步地，所述显示模块为LCOS光学模组显示屏，所述LCOS光学模组显示屏分辨率不低于800x480。
进一步地，所述移动终端设备包括手机或平板电脑等电子设备。
本发明还提供了一种基于所述智能眼镜的智能显示方法，终端设备通过数据连接从网上获取信息，智能眼镜通过通信模块与终端设备直接建立信息连接，控制模块控制通信模块对显示模块的信息传输及显示，语音模块主要是采集用户的语音命令，眼球追踪传感模块主要是采集用户的眼球位置信息，进而获取用户的关注焦点，将获取的用户眼球位置通过处理模块进行处理，传递给控制模块，进而控制信息传输与显示，
用户通过语音模块与眼球追踪传感模块向智能眼镜传输命令信息，来获取用户自己想要得到的信息内容，在显示界面初始化时，界面上将显示提前设置的预设标签，控制模块将会在初始界面时会优先处理处理模块所传输的眼球追踪传感模块获取的用户眼球位置信息，当用户在一个标签停留的时间超过预设值后，控制模块将会控制通信模块传输该预设标签所规定的内容信息，并实现全屏显示，在全屏显示界面中，控制模块将会优先处理处理模块所传输的语音模块获取的语音命令信息，主要是通过语音命令退出全屏回到标签界面，也可以通过语音控制视频类信息的的播放与暂停交互，在全屏界面中，通过眼球追踪传感模块对用户眼球位置的获取，当用户在界面中一个位置停留超过预定值时，会对用户关注的信息进行局部渲染，若为视频信息，用户也可以通过眼球追踪传感模块对视频发出播放暂停功能。
具体包括以下步骤：
第一步，通过通信模块建立智能眼镜与移动终端设备之间连接；
第二步，将移动终端设备初始画面传输至智能眼镜显示模块进行显示；
第三步，处理模块将通过控制模块读取到虚拟界面的显示状态，判断是否处于显示预设标签的状态还是处理信息浏览或视频播放的全屏状态。
第四步，处理模块的微型控制器根据读取的界面状态信息，选择优先处理的命令信息类别。
第一种情况，一般在初始界面（开机界面）为显示预设标签的界面，光学波导设备产生虚拟界面，当处理模块判断虚拟界面显示为预设标签界面时，处理模块会优先处理所获取的眼球命令信号，通过眼球传感追踪模块对用户的眼球位置进行追踪定位，确定用户视觉焦点位于虚拟界面的坐标位置，当用户瞳孔的落点在预设的外挂标签上注视时间超过预设值时，产生相应预设外挂标签中的控制命令信号，控制模块将会控制通信模块传输该预设标签所规定的内容信息，进而选择相应的功能进行信息交互，否则，继续获取重新获取用户视觉焦点位于虚拟界面的坐标位置；获得控制命令信号后传输至处理模块，并通过控制模块传输至移动终端设备并产生相应的操作。在信息浏览的全屏模块时，在没有接受到语音命令信号的前提下，处理模块会处理所接收的眼球位置信号，对用户的注视焦点处进行局部渲染，方便用户信息浏览和阅读；
第二种情况，处理模块判断虚拟界面为信息浏览的全屏界面或视频播放的全屏界面时，处理模块会优先传输所获取的语音控制命令信号，主要是控制虚拟界面退出全屏显示，回到预设标签界面或者控制视频播放的全屏界面中视频的暂停及播放等功能。通过语音模块采集用户语音控制命令，将控制命令转换成控制信号传输至处理模块，进一步传输至控制模块，控制模块产生的操作命令通过通信模块传输至移动终端设备，移动终端设备做出相应操作。
第五步，控制模块接受优先发送的命令信号对虚拟界面的状态进行控制。
本发明有益效果如下:
1.解决了目前在虚拟现实中人机交互不自然的缺点，大大的提高了用户的体验效果；
2.采用语音控制和眼球追踪技术相结合，使交互更加的方便，体验效果更好；
3.通过眼球追踪技术可实现的交互，极为高效，便捷；
4.采用的通信模块不仅功耗低，发热量小，性能稳定，并且是一种高速接入网络的设备，可以随时接入公网；
5.在用户进行信息浏览中，采用了局部渲染功能，不仅符合人在现实中看事物的规则，也降低了功耗，提高了性能；
6.通信模块采用WiFi模块或蓝牙模块或WiFi模块和或蓝牙模块都有，使智能眼睛针对的终端设备更加的广泛，同时也方便了用户对信号传输方式的选择；
7.将终端设备的信息以智能眼睛显示出来，解决了用户长时间低头看手机的症状，有益于用户的身心健康。
附图说明
图1为智能眼镜示意图；
图2为智能显示眼镜系统模块示意图；
图3为智能眼镜语音模块及眼球追踪传感模块示意图；
图4为智能显示方法流程图。
具体实施方式
下面结合具体实施方式对本发明作进一步的说明。其中，附图仅用于示例性说明，表示的仅是示意图，而非实物图，不能理解为对本发明的限制；为了更好地说明本发明的实施例，附图某些部件会有省略、放大或缩小，并不代表实际产品的尺寸；对本领域技术人员来说，附图中某些公知结构及其说明可能省略是可以理解的。
实施例
如图1所示，一种基于眼球追踪传感技术的智能眼镜，包括眼镜本体11、用于形成虚拟界面的光学波导设备12和系统模块。
如图2所示，系统模块包括用于获取用户眼球位于虚拟界面坐标的眼球追踪传感模块1、语音模块2、用于对语音模块2及眼球追踪传感模块1所采集的命令信息进行处理的处理模块3、用于接收数字信息并控制显示输出的控制模块4、用于与移动终端设备9连接的通信模块5和显示模块6，控制模块4分别与通信模块5、显示模块6和处理模块3连接，处理模块3与语音模块2和眼球追踪传感模块1连接。
智能眼镜还包括电源模块8，用以给智能眼镜提供电源和用于控制智能眼镜启动或关闭的电源开关。
控制模块为君正M200芯片，所述君正M200芯片内嵌一个高性能的XBurst双核CPU、显示屏驱动接口和两路通用异步接收器。
通信模块为WiFi模块。
显示模块为LCOS光学模组显示屏，LCOS光学模组显示屏分辨率为800x480。
移动终端设备为手机。
如图3所示，语音模块2主要集成有双麦线性阵列的两个麦克风2-1，还有对采集的模拟信号进行放大处理和信号过滤处理的1号信号放大器2-2和1号信号过滤器2-3，以及对过滤处理后的信号进行模数转换的AD转换模块10，其主要功能是把处理过的信号转换成控制模块能够识别的数字信号。
眼球追踪传感模块1主要集成有采集眼球位置信息的电容传感集1-1为信号采集器，对采集的信号进行放大处理的2号信号放大器1-2和对放大后的信号进行信号过滤的2号信号过滤器1-3，以及对过滤处理后的信号进行数模转换的AD转换模块10，以便控制模块4能够识别。
处理模块3为微型控制器，其主要的作用是通过判断用于形成虚拟界面的光学波导设备中的虚拟界面是否为显示预设标签的界面还是用于信息浏览或视频播放的全屏界面状态，然后微型控制器根据虚拟界面的状态来判断及选择是否优先传输语音信号还是眼球追踪模块所获得命令信号，对界面的显示信息进行控制。
如图4所示，虚拟界面预建立有视线模型，视线模型以3X3的形式平均分布有9个校准点，校准点中心点与用户瞳孔中心的空间坐标对应，第一行第一列位置上的校准点与用户内眼角的空间坐标对应。
虚拟界面中包括多个外挂标签，预设标签可以设置有搜索、刷新、智能提醒等常用的交互功能，通过瞳孔的追踪进行相应的功能选择，可以对虚拟界面进行相应的处理，实现自然的信息交互。
如图4所示，本发明还提供了一种基于所述智能眼镜的智能显示方法，终端设备通过数据连接从网上获取信息，智能眼镜通过通信模块与终端设备直接建立信息连接，控制模块控制通信模块对显示模块的信息传输及显示，语音模块主要是采集用户的语音命令，眼球追踪传感模块主要是采集用户的眼球位置信息，进而获取用户的关注焦点，将获取的用户眼球位置通过处理模块进行处理，传递给控制模块，进而控制信息传输与显示，
用户通过语音模块与眼球追踪传感模块向智能眼睛传输命令信息，来获取用户自己想要得到的信息内容，在显示界面初始化时，界面上将显示提前设置的预设标签，控制模块将会在初始界面时会优先处理处理模块所传输的眼球追踪传感模块获取的用户眼球位置信息，当用户在一个标签停留的时间超过预设值后，控制模块将会控制通信模块传输该预设标签所规定的内容信息，并实现全屏显示，在全屏显示界面中，控制模块将会优先处理处理模块所传输的语音模块获取的语音命令信息，主要是通过语音命令退出全屏回到标签界面，也可以通过语音控制视频类信息的的播放与暂停交互，在全屏界面中，通过眼球追踪传感模块对用户眼球位置的获取，当用户在界面中一个位置停留超过预定值时，会对用户关注的信息进行局部渲染，若为视频信息，用户也可以通过眼球追踪传感模块对视频发出播放暂停功能。
具体包括以下步骤：
第一步，通过通信模块建立智能眼镜与移动终端设备之间连接；
第二步，将移动终端设备初始画面传输至智能眼镜显示模块进行显示；
第三步，处理模块将通过控制模块读取到虚拟界面的显示状态，判断是否处于显示预设标签的状态还是处理信息浏览或视频播放的全屏状态。
第四步，处理模块的微型控制器根据读取的界面状态信息，选择优先处理的命令信息类别。
第一种情况，一般在初始界面为显示预设标签的界面，光学波导设备产生虚拟界面，当处理模块判断虚拟界面显示为预设标签界面时，处理模块会优先处理所获取的眼球命令信号，通过眼球传感追踪模块对用户的眼球位置进行追踪定位，确定用户视觉焦点位于虚拟界面的坐标位置，当用户瞳孔的落点在预设的外挂标签上注视时间超过预设值时，产生相应预设外挂标签中的控制命令信号，控制模块将会控制通信模块传输该预设标签所规定的内容信息，进而选择相应的功能进行信息交互，否则，继续获取重新获取用户视觉焦点位于虚拟界面的坐标位置；获得控制命令信号后传输至处理模块，并通过控制模块传输至移动终端设备并产生相应的操作。在信息浏览的全屏模块时，在没有接受到语音命令信号的前提下，处理模块会处理所接收的眼球位置信号，对用户的注视焦点处进行局部渲染，方便用户信息浏览和阅读；
第二种情况，处理模块判断虚拟界面为信息浏览的全屏界面或视频播放的全屏界面时，处理模块会优先传输所获取的语音控制命令信号，主要是控制虚拟界面退出全屏显示，回到预设标签界面或者控制视频播放的全屏界面中视频的暂停及播放等功能。通过语音模块采集用户语音控制命令，将控制命令转换成控制信号传输至处理模块，进一步传输至控制模块，控制模块产生的操作命令通过通信模块传输至移动终端设备，移动终端设备做出相应操作。
第五步，控制模块接受优先发送的命令信号对虚拟界面的状态进行控制。
显然，上述实施例仅仅是为清楚地说明本发明的技术方案所作的举例，而并非是对本发明的实施方式的限定。对于所属领域的普通技术人员来说，在上述说明的基础上还可以做出其它不同形式的变化或变动。凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明权利要求的保护之内。
Claims (9)
1.一种基于眼球追踪传感技术的智能眼镜，其特征在于，所述智能眼镜包括眼镜本体、用于形成虚拟界面的光学波导设备和系统模块，所述系统模块包括用于获取用户眼球位于所述虚拟界面坐标的眼球追踪传感模块、语音模块、用于对语音模块及眼球追踪传感模块所采集的命令信息进行处理的处理模块、用于接收数字信息并控制显示输出的控制模块、用于与移动终端设备连接的通信模块和显示模块，所述控制模块分别与通信模块、显示模块和处理模块连接，所述处理模块与语音模块和眼球追踪传感模块连接，所述语音模块包括双麦线性阵列的两个麦克风、用于对采集的模拟信号进行放大处理的1号信号放大器、用于信号过滤处理的1号信号过滤器和对过滤处理后的信号进行模数转换的AD转换模块，所述眼球追踪传感模块包括用于采集眼球位置信息的电容传感集、用于对采集的信号进行放大处理的2号信号放大器、用于对放大后的信号进行信号过滤的2号信号过滤器和用于对过滤处理后的信号进行数模转换的AD转换模块。
2.根据权利要求1所述的智能眼镜，其特征在于，所述虚拟界面预建立有视线模型，所述视线模型以3X3的形式平均分布有9个校准点，所述校准点中心点与用户瞳孔中心的空间坐标对应，所述第一行第一列位置上的校准点与用户内眼角的空间坐标对应，所述虚拟界面中包括多个外挂标签。
3.根据权利要求2所述的智能眼镜，其特征在于，所述预设标签包括搜索、刷新和智能提醒的一种或多种。
4.根据权利要求1所述的智能眼镜，其特征在于，还包括电源模块和用于控制智能眼镜启动或关闭的电源开关。
5.根据权利要求1所述的智能眼镜，其特征在于，所述控制模块为君正M200芯片，所述君正M200芯片内嵌一个高性能的XBurst双核CPU、显示屏驱动接口和两路通用异步接收器。
6.根据权利要求1所述的智能眼镜，其特征在于，所述通信模块包括WiFi模块和/或蓝牙模块。
7.根据权利要求1所述的智能眼镜，其特征在于，所述显示模块为LCOS光学模组显示屏，所述LCOS光学模组显示屏分辨率不低于800x480。
8.根据权利要求9所述的智能眼镜，其特征在于，所述移动终端设备包括手机或平板电脑。
9.一种基于权利要求1~8所述智能眼镜的智能显示方法，其特征在于，包括以下步骤：
S1.通过通信模块建立智能眼镜与移动终端设备之间连接；
S2.将移动终端设备初始画面传输至智能眼镜显示模块进行显示；
S3.处理模块将通过控制模块读取到虚拟界面的显示状态，判断是否处于显示预设标签的状态还是处理信息浏览或视频播放的全屏状态；
S4.处理模块的微型控制器根据读取的界面状态信息，选择优先处理的命令信息类别；
S4-1.一般在初始界面为显示预设标签的界面，光学波导设备产生虚拟界面，当处理模块判断虚拟界面显示为预设标签界面时，处理模块会优先处理所获取的眼球命令信号，通过眼球传感追踪模块对用户的眼球位置进行追踪定位，确定用户视觉焦点位于虚拟界面的坐标位置，当用户瞳孔的落点在预设的外挂标签上注视时间超过预设值时，产生相应预设外挂标签中的控制命令信号，控制模块将会控制通信模块传输该预设标签所规定的内容信息，进而选择相应的功能进行信息交互，否则，继续获取重新获取用户视觉焦点位于虚拟界面的坐标位置；获得控制命令信号后传输至处理模块，并通过控制模块传输至移动终端设备并产生相应的操作；在全屏信息浏览时，在没有接受到语音命令信号的前提下，处理模块会处理所接收的眼球位置信号，对用户的注视焦点处进行局部渲染，方便用户信息浏览和阅读；
S4-2.处理模块判断虚拟界面为信息浏览的全屏界面或视频播放的全屏界面时，处理模块会优先传输所获取的语音控制命令信号，主要是控制虚拟界面退出全屏显示，回到预设标签界面或者控制视频播放的全屏界面中视频的暂停及播放等功能，通过语音模块采集用户语音控制命令，将控制命令转换成控制信号传输至处理模块，进一步传输至控制模块，控制模块产生的操作命令通过通信模块传输至移动终端设备，移动终端设备做出相应操作；
S5.控制模块接受优先发送的命令信号对虚拟界面的状态进行控制。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710397300.1A CN107193381A (zh) | 2017-05-31 | 2017-05-31 | 一种基于眼球追踪传感技术的智能眼镜及其显示方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710397300.1A CN107193381A (zh) | 2017-05-31 | 2017-05-31 | 一种基于眼球追踪传感技术的智能眼镜及其显示方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN107193381A true CN107193381A (zh) | 2017-09-22 |
Family
ID=59876743
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710397300.1A Pending CN107193381A (zh) | 2017-05-31 | 2017-05-31 | 一种基于眼球追踪传感技术的智能眼镜及其显示方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN107193381A (zh) |
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107589545A (zh) * | 2017-09-29 | 2018-01-16 | 芜湖威灵数码科技有限公司 | 一种智能vr眼镜 |
| CN107632395A (zh) * | 2017-09-29 | 2018-01-26 | 芜湖威灵数码科技有限公司 | 一种vr镜片 |
| CN107678548A (zh) * | 2017-09-27 | 2018-02-09 | 歌尔科技有限公司 | 显示控制方法、系统和虚拟现实设备 |
| CN107688242A (zh) * | 2017-09-29 | 2018-02-13 | 芜湖威灵数码科技有限公司 | 一种vr眼镜 |
| CN107742403A (zh) * | 2017-09-29 | 2018-02-27 | 芜湖威灵数码科技有限公司 | 一种vr眼镜电路的工作方法 |
| CN107742404A (zh) * | 2017-09-29 | 2018-02-27 | 芜湖威灵数码科技有限公司 | 一种vr眼镜电路 |
| CN107748513A (zh) * | 2017-09-29 | 2018-03-02 | 芜湖威灵数码科技有限公司 | 一种vr眼镜的工作方法 |
| CN108489507A (zh) * | 2018-03-20 | 2018-09-04 | 京东方科技集团股份有限公司 | 导航装置及其工作方法、计算机可读存储介质 |
| CN110324648A (zh) * | 2019-07-17 | 2019-10-11 | 咪咕文化科技有限公司 | 直播展现方法和系统 |
| CN115291734A (zh) * | 2022-10-08 | 2022-11-04 | 深圳市天趣星空科技有限公司 | 基于智能眼镜的智能设备控制方法和系统 |
| CN117255188A (zh) * | 2023-07-21 | 2023-12-19 | 北京行者无疆科技有限公司 | Ar眼镜的转换器对于移动终端设备的空间界面显示控制交互系统及方法 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101340562A (zh) * | 2008-04-28 | 2009-01-07 | 安防科技（中国）有限公司 | 监控系统与监控方法 |
| CN101449265A (zh) * | 2006-03-15 | 2009-06-03 | 杰里·M·惠特克 | 具有浏览并与万维网交互的头戴式显示器的移动全球虚拟浏览器 |
| CN103946732A (zh) * | 2011-09-26 | 2014-07-23 | 微软公司 | 基于对透视、近眼显示器的传感器输入的视频显示修改 |
| CN104238726A (zh) * | 2013-06-17 | 2014-12-24 | 腾讯科技（深圳）有限公司 | 智能眼镜控制方法、装置及一种智能眼镜 |
| CN105320279A (zh) * | 2014-07-31 | 2016-02-10 | 三星电子株式会社 | 可穿戴眼镜和利用其提供内容的方法 |
| WO2017002488A1 (ja) * | 2015-06-30 | 2017-01-05 | ソニー株式会社 | 情報処理装置、情報処理方法、及びプログラム |
-
2017
- 2017-05-31 CN CN201710397300.1A patent/CN107193381A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101449265A (zh) * | 2006-03-15 | 2009-06-03 | 杰里·M·惠特克 | 具有浏览并与万维网交互的头戴式显示器的移动全球虚拟浏览器 |
| CN101340562A (zh) * | 2008-04-28 | 2009-01-07 | 安防科技（中国）有限公司 | 监控系统与监控方法 |
| CN103946732A (zh) * | 2011-09-26 | 2014-07-23 | 微软公司 | 基于对透视、近眼显示器的传感器输入的视频显示修改 |
| CN104238726A (zh) * | 2013-06-17 | 2014-12-24 | 腾讯科技（深圳）有限公司 | 智能眼镜控制方法、装置及一种智能眼镜 |
| CN105320279A (zh) * | 2014-07-31 | 2016-02-10 | 三星电子株式会社 | 可穿戴眼镜和利用其提供内容的方法 |
| WO2017002488A1 (ja) * | 2015-06-30 | 2017-01-05 | ソニー株式会社 | 情報処理装置、情報処理方法、及びプログラム |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107678548A (zh) * | 2017-09-27 | 2018-02-09 | 歌尔科技有限公司 | 显示控制方法、系统和虚拟现实设备 |
| CN107589545A (zh) * | 2017-09-29 | 2018-01-16 | 芜湖威灵数码科技有限公司 | 一种智能vr眼镜 |
| CN107632395A (zh) * | 2017-09-29 | 2018-01-26 | 芜湖威灵数码科技有限公司 | 一种vr镜片 |
| CN107688242A (zh) * | 2017-09-29 | 2018-02-13 | 芜湖威灵数码科技有限公司 | 一种vr眼镜 |
| CN107742403A (zh) * | 2017-09-29 | 2018-02-27 | 芜湖威灵数码科技有限公司 | 一种vr眼镜电路的工作方法 |
| CN107742404A (zh) * | 2017-09-29 | 2018-02-27 | 芜湖威灵数码科技有限公司 | 一种vr眼镜电路 |
| CN107748513A (zh) * | 2017-09-29 | 2018-03-02 | 芜湖威灵数码科技有限公司 | 一种vr眼镜的工作方法 |
| CN108489507A (zh) * | 2018-03-20 | 2018-09-04 | 京东方科技集团股份有限公司 | 导航装置及其工作方法、计算机可读存储介质 |
| CN110324648A (zh) * | 2019-07-17 | 2019-10-11 | 咪咕文化科技有限公司 | 直播展现方法和系统 |
| CN115291734A (zh) * | 2022-10-08 | 2022-11-04 | 深圳市天趣星空科技有限公司 | 基于智能眼镜的智能设备控制方法和系统 |
| CN117255188A (zh) * | 2023-07-21 | 2023-12-19 | 北京行者无疆科技有限公司 | Ar眼镜的转换器对于移动终端设备的空间界面显示控制交互系统及方法 |
| CN117255188B (zh) * | 2023-07-21 | 2024-03-01 | 北京行者无疆科技有限公司 | Ar眼镜的转换器对于移动终端设备的空间界面显示控制交互系统及方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107193381A (zh) | 一种基于眼球追踪传感技术的智能眼镜及其显示方法 | |
| CN110221432A (zh) | 头戴式显示器的图像显示方法及设备 | |
| CN110322818A (zh) | 显示装置及操作方法 | |
| CN108076290B (zh) | 一种图像处理方法及移动终端 | |
| CN107833177A (zh) | 一种图像处理方法及移动终端 | |
| CN103869468A (zh) | 信息处理设备和记录介质 | |
| CN104811687A (zh) | 一种虚拟现实头盔的电路系统和虚拟现实头盔 | |
| CN105867626A (zh) | 头戴式虚拟现实设备及其控制方法、虚拟现实系统 | |
| CN105684074A (zh) | 图像显示装置和图像显示方法、图像输出装置和图像输出方法与图像显示系统 | |
| CN205016133U (zh) | 教育机器人 | |
| CN205507687U (zh) | 头戴式虚拟现实设备及虚拟现实系统 | |
| CN201336696Y (zh) | 一种具有存储播放功能的数字眼镜电视 | |
| CN105607263A (zh) | 头戴式电子设备 | |
| CN108337543A (zh) | 一种视频播放方法、终端及计算机可读存储介质 | |
| CN115599219B (zh) | 一种显示屏的护眼控制方法、系统、设备及存储介质 | |
| WO2020151255A1 (zh) | 一种基于移动终端的展示控制系统及方法 | |
| CN105630145A (zh) | 虚拟感觉的方法和装置以及使用其的眼镜或头盔 | |
| CN105653020A (zh) | 穿越时空的方法和装置以及使用其的眼镜或头盔 | |
| CN107835404A (zh) | 基于头戴式虚拟现实设备的图像显示方法、设备及系统 | |
| CN109964481A (zh) | 体验共享系统 | |
| CN109167914A (zh) | 一种图像处理方法及移动终端 | |
| CN207096575U (zh) | 一种多功能增强现实眼镜 | |
| CN106842565A (zh) | 一种分离式可穿戴智能视觉增强设备 | |
| CN105892627A (zh) | 虚拟超越现实的方法和装置以及使用其的眼镜或头盔 | |
| WO2024114584A1 (zh) | 信息提示方法、信息提示装置、电子设备和可读存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170922 |
|
| RJ01 | Rejection of invention patent application after publication |