CN113655622A - 一种应用在ar及vr折射屏眼动自动调焦系统 - Google Patents
一种应用在ar及vr折射屏眼动自动调焦系统 Download PDFInfo
- Publication number
- CN113655622A CN113655622A CN202111111247.7A CN202111111247A CN113655622A CN 113655622 A CN113655622 A CN 113655622A CN 202111111247 A CN202111111247 A CN 202111111247A CN 113655622 A CN113655622 A CN 113655622A
- Authority
- CN
- China
- Prior art keywords
- eye movement
- grid
- image
- processor
- coordinate
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000004424 eye movement Effects 0.000 title claims abstract description 25
- 239000011159 matrix material Substances 0.000 claims abstract description 4
- 238000005457 optimization Methods 0.000 claims description 5
- 239000002699 waste material Substances 0.000 abstract description 2
- 230000009286 beneficial effect Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 238000010438 heat treatment Methods 0.000 description 2
- 210000001747 pupil Anatomy 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000017525 heat dissipation Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Optics & Photonics (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明涉及显示系统技术领域，具体涉及一种应用在AR及VR折射屏眼动自动调焦系统，其包括：图像处理单元，图像处理单元设有处理器，以及分别与处理器连接的图像输入端口、图像输出端口和坐标输入接口，处理器内设有网格划分模块，用于对影像进行网格分区，并形成矩阵状排列的网格图；显示屏固定设有眼动追踪模块，眼动追踪模块用于识别使用者的眼部动作，眼动追踪模块设有坐标输出端，坐标输出端与坐标输入接口连接，用于向处理器传递使用者观看的网格坐标。本发明通过采集使用者的眼部运动，对使用者所关注的图像区域进行精细优化，从而避免硬件资源浪费，降低处理负载及发热量，同时还降低了硬件选型标准，降低设备成本。
Description
技术领域
本发明涉及显示系统技术领域，具体涉及一种应用在AR及VR折射屏眼动自动调焦系统。
背景技术
目前虚拟现实(英文全称为VirtualReality,英文简称为VR)设备已逐渐成为人工智能领域的重要分支，并且在消费电子市场也占据着重要地位。通过虚拟现实技术，为人们的生活、工作和学习带来了极大的便利性。
用户在使用VR设备时，为了保证成像质量，设备需要对图像进行大量复杂的运算，因此使设备的发热量增大，同时也对硬件配置提出更高的要求，因此提高设备总体成本，提高了使用门槛。
发明内容
本发明提供一种应用在AR及VR折射屏眼动自动调焦系统，通过采集使用者的眼部运动，对使用者所关注的图像区域进行精细优化，从而避免硬件资源浪费，降低处理负载及发热量，同时还降低了硬件选型标准，降低设备成本。
为了达到上述目的，本发明提供如下技术方案：一种应用在AR及VR折射屏眼动自动调焦系统，其包括：图像处理单元，所述图像处理单元设有处理器，以及分别与所述处理器连接的图像输入端口、图像输出端口和坐标输入接口，所述处理器内设有网格划分模块，用于对从所述图像输入端口的影像进行网格分区，并形成矩阵状排列的网格图；显示屏，所述显示屏与所述图像输出端口连接，并且所述显示屏任意的一侧固定设有眼动追踪模块，所述眼动追踪模块用于识别使用者的眼部动作，所述眼动追踪模块设有坐标输出端，所述坐标输出端与所述坐标输入接口连接，用于向所述处理器传递使用者观看的所述网格坐标。
优选的，所述处理器内设有粗运算单元和精细运算单元；所述粗运算单元与所述图像输出端口连接，用于对所述影像进行粗略处理，所述精细运算单元与所述坐标输入接口连接，用于对所述网格坐标内的所述网格图进行优化处理。
优选的，所述处理器内设有粗运算单元和精细运算单元；所述精细运算单元与所述坐标输入接口连接，用于对与所述网格坐标以内的所述网格图进行精细处理，所述粗运算单元与所述坐标输入接口连接，用于对所述网格坐标以外的所述网格图进行粗略处理。
本发明有益效果为：眼动追踪模块通过获取使用者瞳孔所注视的角度，进而获得对应的网格图中的网格坐标，而图像处理单元则对该网格坐标内的网格图进行高分辨率的处理，对于网格坐标外的网格图进行模糊显示，从而形成调焦效果。该由于使用者所注视的网格图范围较小，因此图像处理单元的所处理的影像数据量变小，间接的降低处理器的负载，减小发热量的同时，还降低了硬件性能的要求，间接降低的设备的整机成本，因此利于AV、VR设备的普及。
作为优选方案，精细运算单元对网格坐标内的网格图进行二次优化，因此提高了网格坐表内的网格图的处理速度，降低硬件配置选型标准，最大程度上降低功耗，以及CPU部分的散热问题。
作为另一优选方案，精细处理单元直接对网格坐标内的网格图进行精细处理，而网格坐标以外的网格图则由粗运算单元进行处理，因此降低了硬件对处理性能的要求。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明系统结构示意图。
具体实施方式
下面将结合本发明的附图，对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
根据图1所示，一种应用在AR及VR折射屏眼动自动调焦系统，其包括：图像处理单元，所述图像处理单元设有处理器，以及分别与所述处理器连接的图像输入端口、图像输出端口和坐标输入接口，所述处理器内设有网格划分模块，用于对从所述图像输入端口的影像进行网格分区，并形成矩阵状排列的网格图；显示屏，所述显示屏与所述图像输出端口连接，并且所述显示屏任意的一侧固定设有眼动追踪模块，所述眼动追踪模块用于识别使用者的眼部动作，所述眼动追踪模块设有坐标输出端，所述坐标输出端与所述坐标输入接口连接，用于向所述处理器传递使用者观看的所述网格坐标。
上述设置中，眼动追踪模块通过获取使用者瞳孔所注视的角度，进而获得对应的网格图中的网格坐标，而图像处理单元则对该网格坐标内的网格图进行高分辨率的处理，对于网格坐标外的网格图进行模糊显示，从而形成调焦效果。该由于使用者所注视的网格图范围较小，因此图像处理单元的所处理的影像数据量变小，间接的降低处理器的负载，减小发热量的同时，还降低了硬件性能的要求，间接降低的设备的整机成本，因此利于AV、VR设备的普及。
作为优选方案，所述处理器内设有粗运算单元和精细运算单元；所述粗运算单元与所述图像输出端口连接，用于对所述影像进行粗略处理，所述精细运算单元与所述坐标输入接口连接，用于对所述网格坐标内的所述网格图进行优化处理。
该设置中，精细运算单元对网格坐标内的网格图进行二次优化，因此提高了网格坐表内的网格图的处理速度。
作为另一优选方案，所述处理器内设有粗运算单元和精细运算单元；所述精细运算单元与所述坐标输入接口连接，用于对与所述网格坐标以内的所述网格图进行精细处理，所述粗运算单元与所述坐标输入接口连接，用于对所述网格坐标以外的所述网格图进行粗略处理。
该设置中，精细处理单元直接对网格坐标内的网格图进行精细处理，而网格坐标以外的网格图则由粗运算单元进行处理，因此降低了硬件对处理性能的要求。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应所述以权利要求的保护范围为准。
Claims (3)
1.一种应用在AR及VR折射屏眼动自动调焦系统，其特征在于,包括：
图像处理单元，所述图像处理单元设有处理器，以及分别与所述处理器连接的图像输入端口、图像输出端口和坐标输入接口，所述处理器内设有网格划分模块，用于对从所述图像输入端口的影像进行网格分区，并形成矩阵状排列的网格图；
显示屏，所述显示屏与所述图像输出端口连接，并且所述显示屏任意的一侧固定设有眼动追踪模块，所述眼动追踪模块用于识别使用者的眼部动作，所述眼动追踪模块设有坐标输出端，所述坐标输出端与所述坐标输入接口连接，用于向所述处理器传递使用者观看的所述网格坐标。
2.根据权利要求1所述的一种应用在AR及VR折射屏眼动自动调焦系统，其特征在于：所述处理器内设有粗运算单元和精细运算单元；所述粗运算单元与所述图像输出端口连接，用于对所述影像进行粗略处理，所述精细运算单元与所述坐标输入接口连接，用于对所述网格坐标内的所述网格图进行优化处理。
3.根据权利要求1所述的一种应用在AR及VR折射屏眼动自动调焦系统，其特征在于：所述处理器内设有粗运算单元和精细运算单元；所述精细运算单元与所述坐标输入接口连接，用于对与所述网格坐标以内的所述网格图进行精细处理，所述粗运算单元与所述坐标输入接口连接，用于对所述网格坐标以外的所述网格图进行粗略处理。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111111247.7A CN113655622A (zh) | 2021-09-18 | 2021-09-18 | 一种应用在ar及vr折射屏眼动自动调焦系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111111247.7A CN113655622A (zh) | 2021-09-18 | 2021-09-18 | 一种应用在ar及vr折射屏眼动自动调焦系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113655622A true CN113655622A (zh) | 2021-11-16 |
Family
ID=78484057
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111111247.7A Pending CN113655622A (zh) | 2021-09-18 | 2021-09-18 | 一种应用在ar及vr折射屏眼动自动调焦系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113655622A (zh) |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106371566A (zh) * | 2015-07-24 | 2017-02-01 | 由田新技股份有限公司 | 用于眼部追踪的校正模块、方法及计算机可读取记录媒体 |
| CN107609516A (zh) * | 2017-09-13 | 2018-01-19 | 重庆爱威视科技有限公司 | 自适应眼动追踪方法 |
| CN107656613A (zh) * | 2017-09-08 | 2018-02-02 | 国网山东省电力公司电力科学研究院 | 一种基于眼动追踪的人机交互系统及其工作方法 |
| CN109086726A (zh) * | 2018-08-10 | 2018-12-25 | 陈涛 | 一种基于ar智能眼镜的局部图像识别方法及系统 |
| CN109597489A (zh) * | 2018-12-27 | 2019-04-09 | 武汉市天蝎科技有限公司 | 一种近眼显示设备的眼动追踪交互的方法及系统 |
| CN112732071A (zh) * | 2020-12-11 | 2021-04-30 | 浙江大学 | 一种免校准眼动追踪系统及应用 |
-
2021
- 2021-09-18 CN CN202111111247.7A patent/CN113655622A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106371566A (zh) * | 2015-07-24 | 2017-02-01 | 由田新技股份有限公司 | 用于眼部追踪的校正模块、方法及计算机可读取记录媒体 |
| CN107656613A (zh) * | 2017-09-08 | 2018-02-02 | 国网山东省电力公司电力科学研究院 | 一种基于眼动追踪的人机交互系统及其工作方法 |
| CN107609516A (zh) * | 2017-09-13 | 2018-01-19 | 重庆爱威视科技有限公司 | 自适应眼动追踪方法 |
| CN109086726A (zh) * | 2018-08-10 | 2018-12-25 | 陈涛 | 一种基于ar智能眼镜的局部图像识别方法及系统 |
| CN109597489A (zh) * | 2018-12-27 | 2019-04-09 | 武汉市天蝎科技有限公司 | 一种近眼显示设备的眼动追踪交互的方法及系统 |
| CN112732071A (zh) * | 2020-12-11 | 2021-04-30 | 浙江大学 | 一种免校准眼动追踪系统及应用 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103247282B (zh) | 一种显示终端屏幕亮度的控制方法及其显示终端 | |
| CN106327584B (zh) | 一种用于虚拟现实设备的图像处理方法及装置 | |
| WO2021098454A1 (zh) | 一种关注区域检测方法、装置、可读存储介质及终端设备 | |
| CN105279494A (zh) | 可调节用户情绪的人机交互系统、方法及设备 | |
| JP2016515246A (ja) | 可変解像度デプス表現 | |
| CN105487673A (zh) | 一种人机交互系统、方法及装置 | |
| CN103916647B (zh) | 采用拖延期的视频流的姿势预处理来减少平台功率 | |
| US20220044043A1 (en) | Integrated circuit and sensor data processing method | |
| US20200202126A1 (en) | Recognizing carbon-saving behaviors from images | |
| CN103136512A (zh) | 一种瞳孔定位方法及系统 | |
| CN203012636U (zh) | 一种基于激光投影定位的人机交互系统 | |
| CN102306053B (zh) | 一种基于虚拟触摸屏的人机交互方法、装置及电子设备 | |
| CN106200881A (zh) | 一种数据展示方法及装置与虚拟现实设备 | |
| CN111783375A (zh) | 芯片系统及相关装置 | |
| CN112162863B (zh) | 一种边缘卸载决策方法、终端及可读存储介质 | |
| CN110727791A (zh) | 信息分类方法、装置、电子设备和计算机可读存储介质 | |
| CN113655622A (zh) | 一种应用在ar及vr折射屏眼动自动调焦系统 | |
| EP4113356A1 (en) | Layout analysis method and electronic device | |
| CN111176425A (zh) | 多屏幕操作方法与使用此方法的电子系统 | |
| CN112035016A (zh) | 一种基于激光雷达的新型多点触控交互系统及方法 | |
| CN203825558U (zh) | 基于玻璃屏的人机交互系统 | |
| Kao et al. | An adaptive eye gaze tracker system in the integrated cloud computing and mobile device | |
| WO2022267978A1 (zh) | 一种背光值调节方法、处理器、显示终端及存储介质 | |
| CN109856800A (zh) | 分体式ar眼镜的显示控制方法、装置及分体式ar眼镜 | |
| CN103777756A (zh) | 基于玻璃屏的人机交互系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20211116 |