CN105425967A - 视线追踪及人眼感兴趣区域定位系统 - Google Patents

视线追踪及人眼感兴趣区域定位系统 Download PDF

Info

Publication number
CN105425967A
CN105425967A CN201510944017.7A CN201510944017A CN105425967A CN 105425967 A CN105425967 A CN 105425967A CN 201510944017 A CN201510944017 A CN 201510944017A CN 105425967 A CN105425967 A CN 105425967A
Authority
CN
China
Prior art keywords
human eye
hardware platform
image
pupil
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510944017.7A
Other languages
English (en)
Other versions
CN105425967B (zh
Inventor
李斌
吴孟杰
李飞鹏
宋宗玺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
XiAn Institute of Optics and Precision Mechanics of CAS
Original Assignee
XiAn Institute of Optics and Precision Mechanics of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by XiAn Institute of Optics and Precision Mechanics of CAS filed Critical XiAn Institute of Optics and Precision Mechanics of CAS
Priority to CN201510944017.7A priority Critical patent/CN105425967B/zh
Publication of CN105425967A publication Critical patent/CN105425967A/zh
Application granted granted Critical
Publication of CN105425967B publication Critical patent/CN105425967B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/011Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Studio Devices (AREA)

Abstract

本发明公开了一种视线追踪及人眼感兴趣区域定位系统,包括图像采集设备、硬件平台和显示输出设备,图像采集设备包括红外人眼相机和前景相机,红外人眼相机和前景相机的输出端分别与硬件平台的输入端相连,硬件平台的输出端与显示输出设备的输入端相连;所述硬件平台包括存储单元,硬件平台是基于FPGA和双核ARM9处理器;所述红外人眼相机用于拍摄人眼瞳孔图像,并将该图像实时传输至硬件平台;前景相机用于拍摄人眼视线区域图像,将人眼视线区域图像实时传输至硬件平台;通过利用本发明瞳孔与标记点的映射关系即可以确定人眼在视线区域图像中的注视点/感兴趣点,实现了视线追踪的功能。

Description

视线追踪及人眼感兴趣区域定位系统
技术领域
本发明涉及一种可穿戴式电子设备,尤其是一种基于瞳孔检测技术的视线追踪和人眼感兴趣区域定位系统。
背景技术
视线追踪技术广泛用于商业数据分析、车辆辅助驾驶、心理与生理学研究、人因分析、虚拟现实等领域。目前国内视线追踪领域的研究也正处于起步阶段,国外主要是为数不多的几家发达国家高科技公司掌握关键技术并推出了成熟产品。它们的产品价格都十分昂贵,配套软件需要额外购买,并且结构复杂,使用过程相对繁琐,这些因素限制了视线追踪技术更加广泛的应用。
发明内容
为了解决背景技术中的问题,本发明提出了一种精度较高,成本较低,结构简单,容易使用的视线追踪及人眼感兴趣区域定位系统。
本发明给出以下技术方案:
视线追踪及人眼感兴趣区域定位系统,其特殊之处在于:包括图像采集设备、硬件平台和显示输出设备,图像采集设备包括红外人眼相机和前景相机,红外人眼相机和前景相机的输出端分别与硬件平台的输入端相连,硬件平台的输出端与显示输出设备的输入端相连;
所述硬件平台包括存储单元,硬件平台是基于FPGA和双核ARM9处理器;
所述红外人眼相机,用于拍摄人眼瞳孔图像,并将该图像实时传输至硬件平台;前景相机用于拍摄人眼视线区域图像,将人眼视线区域图像实时传输至硬件平台;
硬件平台用于处理接收到的人眼瞳孔图像,并获得相应瞳孔的运动轨迹;
硬件平台还用于:生成设有多个标记点的标记点图像,建立标记点图像中标记点的坐标,将标记点图像发送至显示输出设备;采集瞳孔位置,瞳孔位置是指观察标记点图像中标记点的瞳孔位置,建立瞳孔的坐标:根据标记点的坐标与瞳孔的坐标,建立瞳孔与标记点的映射关系;
硬件平台还用于将接收到的人眼视线区域图像与瞳孔运动轨迹结合,根据建立的瞳孔与标记点的映射关系,得到瞳孔运动轨迹与人眼视线区域图像的映射关系,并在显示输出设备显示;
其中,标记点图像与人眼视线区域图像的分辨率相同;
所述存储单元用于存储硬件平台接受到的人眼瞳孔图像和人眼视线区域图像。
瞳孔与标记点的映射关系是根据标记点的坐标除以对应的瞳孔坐标建立的。具体的建立方法:硬件平台生成标记点图像(标记点图像设有多个标记点),建立标记点图像中标记点的坐标,将标记点图像发送至显示输出设备,通过人眼观测显示输出设备上标记图像内的标记点,记录瞳孔在人眼注视这些标记点时的位置,建立瞳孔坐标,再用每个标记点的坐标除以对应的瞳孔坐标,得到映射系数,利用映射系数建立瞳孔与标记点的映射关系。
因此以后只需检测瞳孔运动轨迹,利用瞳孔与标记点的映射关系即可以确定人眼在视线区域图像中的注视点/感兴趣点,实现视线追踪的功能。
硬件平台运行的软件系统包括Linux操作系统,内核版本为3.03,在Linux操作系统中运行QT和OpenCV交叉编译环境,在交叉编译环境中生成双核ARM9处理器可执行文件;存储单元还用于存储Linux操作系统。
上述硬件平台还包括电源模块、VGA显示接口和USBOTG接口;
所述电源模块为TI公司TPS系列电源芯片;
所述VGA显示接口为ADV7511芯片和HDMI-VGA转接器;
所述USBOTG接口为TUSB1210芯片;
所述存储单元为SD卡和/或U盘;
所述FPGA和双核ARM9处理器为Xilinx公司的ZYNQ-7020芯片。
红外人眼相机为320*240分辨率的近红外CMOS相机,前景相机为640*480分辨率的广角可见光CMOS相机。
硬件平台通过存储在存储单元卡中的Linux操作系统,将Linux操作系统挂载在双核AMR9处理器内部。
上述QT软件版本为4.8.1,所述OpenCV版本为2.4.11。
上述红外人眼相机和前景相机分别通过USBOTG接口与硬件平台相连;所述显示输出设备通过VGA显示接口与硬件平台相连
上述视线追踪及人眼感兴趣区域定位系统还包括具有控制功能的外部设备,具有控制功能的外部设备是鼠标和键盘,所述鼠标和键盘均通过USBOTG接口与硬件平台相连。
本发明具有以下技术效果:
利用本发明瞳孔与标记点的映射关系,可以确定人眼在视线区域图像中的注视点/感兴趣点,能够实现视线追踪的功能,因此,本发明可以为商业领域的宣传文案、海报设计、网页视觉效果、包装设计等提供观测效果的试验分析,计算消费者对海报广告设计的主要观测兴趣位置,从而优化海报广告的设计以达到更好的宣传期望;也可以将本发明制作成可穿戴的,可以辅助用户实时分析测试者感兴趣区域。
附图说明
图1是本发明视线追踪及人眼感兴趣区域定位系统的实现框图。
图2是硬件平台具体电路原理图。
图3是本发明软件系统总体结构。
图4是本发明外部接口示意图。
图5是本发明软件系统流程图。
具体实施方式
本发明提出了一种视线追踪及人眼感兴趣区域定位系统,如图1至图5,包括图像采集设备、硬件平台和显示输出设备,图像采集设备包括红外人眼相机和前景相机,红外人眼相机和前景相机的输出端分别与硬件平台的输入端相连,硬件平台的输出端与显示输出设备的输入端相连;
所述硬件平台包括存储单元,硬件平台是基于FPGA和双核ARM9处理器;
所述红外人眼相机,用于拍摄人眼瞳孔图像,并将该图像实时传输至硬件平台;前景相机用于拍摄人眼视线区域图像,将人眼视线区域图像实时传输至硬件平台;
硬件平台用于处理接收到的人眼瞳孔图像,并获得相应瞳孔的运动轨迹;
硬件平台还用于:生成设有多个标记点的标记点图像,建立标记点图像中标记点的坐标,将标记点图像发送至显示输出设备;采集瞳孔位置,瞳孔位置是指观察标记点图像中标记点的瞳孔位置,建立瞳孔的坐标:根据标记点的坐标与瞳孔的坐标,建立瞳孔与标记点的映射关系;
硬件平台还用于将接收到的人眼视线区域图像与瞳孔运动轨迹结合,根据建立的瞳孔与标记点的映射关系,得到瞳孔运动轨迹与人眼视线区域图像的映射关系,并在显示输出设备显示;
其中,标记点图像与人眼视线区域图像的分辨率相同;
所述存储单元用于存储硬件平台接受到的人眼瞳孔图像和人眼视线区域图像。
硬件平台运行的软件系统包括Linux操作系统,内核版本为3.03,Linux操作系统为基于Linux3.13内核版本的定制操作系统,具体版本为Ubuntu12.04LTS;在Linux操作系统中运行QT和OpenCV交叉编译环境,在交叉编译环境中实现映射关系,其中,QT软件版本为4.8.1,OpenCV版本为2.4.11;存储单元还用于存储Linux操作系统;硬件平台通过存储在存储单元卡中的Linux操作系统,将Linux操作系统挂载在双核AMR9处理器内部。
如图2,硬件平台还包括电源模块、VGA显示接口和USBOTG接口;电源模块为TI公司TPS系列电源芯片;VGA显示接口为ADV7511芯片和HDMI-VGA转接器;USBOTG接口为TUSB1210芯片;存储单元为SD卡和/或U盘。FPGA和双核ARM9处理器均为Xilinx公司的ZYNQ-7020芯片。该芯片内部集成Xilinx公司最新7系列FPGA和双核ARM9处理器,并且通过AXI总线实现FPGA与ARM处理器的高速通信。
红外人眼相机和前景相机分别通过USBOTG接口与硬件平台相连;所述显示输出设备通过VGA显示接口与硬件平台相连;
红外人眼相机可采用为320*240分辨率的近红外CMOS相机,前景相机可采用为640*480分辨率的高清广角可见光CMOS相机。
显示输出设备为一块1280*800分辨率的VGA接口显示屏。显示器主要显示红外相机拍摄人眼瞳孔图像、前景相机模拟人眼视野图像、人眼感兴趣区域标记与追踪、参数设置区域。
视线追踪及人眼感兴趣区域定位系统还包括具有控制功能的外部设备,具有控制功能的外部设备是鼠标和键盘,所述鼠标和键盘均通过USBOTG接口与硬件平台相连,实现人机交互界面控制和Linux操作系统命令输入。
参见图3,是硬件平台运行的软件系统的总体结构和模块外部设计。根据软件系统的功能性需求,可以将软件系统划分为5个功能模块分别为:相机控制与显示、人眼视线中心定位、靶标定位、感兴趣区域的定位,姿态估计与目标位置矫正。
参见图4,用户界面中的要素主要有三部分:红外拍摄瞳孔相机的显示区域、前景相机视频的显示区域、测试图像的显示与更新区域。
参见图5,测试人员通过用户界面按照系统提示完成瞳孔位置标定,瞳孔位姿与显示区域映射关系建立。
相对于现有的技术,本发明视线追踪及人眼感兴趣区域定位系统,充分利用了ARM加FPGA硬件平台,在嵌入式操作系统中运行QT和OpenCV镜像库文件,在QT编程界面中利用C++语言实现人眼瞳孔检测和视线追踪,并建立友好的人机交互界面,利用高清显示器标记人眼感兴趣区域,最终将统计数据保存以备后续分析。相比于现有同类型产品具有相似精度,但成本较低,技术难度要求小的特点。
上述内容是结合具体的优选实施方式对本发明作说明,不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干简单推演或替换。

Claims (9)

1.视线追踪及人眼感兴趣区域定位系统,其特征在于:包括图像采集设备、硬件平台和显示输出设备,图像采集设备包括红外人眼相机和前景相机,红外人眼相机和前景相机的输出端分别与硬件平台的输入端相连,硬件平台的输出端与显示输出设备的输入端相连;
所述硬件平台包括存储单元,硬件平台是基于FPGA和双核ARM9处理器;
所述红外人眼相机用于拍摄人眼瞳孔图像,并将该图像实时传输至硬件平台;前景相机用于拍摄人眼视线区域图像,将人眼视线区域图像实时传输至硬件平台;
硬件平台用于处理接收到的人眼瞳孔图像,并获得相应瞳孔的运动轨迹;
硬件平台还用于:生成设有多个标记点的标记点图像,建立标记点图像中标记点的坐标,将标记点图像发送至显示输出设备;采集瞳孔位置,瞳孔位置是指观察标记点图像中标记点的瞳孔位置,建立瞳孔的坐标:根据标记点的坐标与瞳孔的坐标,建立瞳孔与标记点的映射关系;
硬件平台还用于将接收到的人眼视线区域图像与瞳孔运动轨迹结合,根据建立的瞳孔与标记点的映射关系,得到瞳孔运动轨迹与人眼视线区域图像的映射关系,并在显示输出设备显示;
其中,标记点图像与人眼视线区域图像的分辨率相同;
所述存储单元用于存储硬件平台接受到的人眼瞳孔图像和人眼视线区域图像。
2.根据权利要求1所述的视线追踪及人眼感兴趣区域定位系统,其特征在于:瞳孔与标记点的映射关系是根据标记点的坐标除以对应的瞳孔坐标建立的。
3.根据权利要求2所述的视线追踪及人眼感兴趣区域定位系统,其特征在于:硬件平台运行的软件系统包括Linux操作系统,内核版本为3.03,在Linux操作系统中运行QT和OpenCV交叉编译环境,在交叉编译环境中生成双核ARM9处理器可执行文件;存储单元还用于存储Linux操作系统。
4.根据权利要求3所述的视线追踪及人眼感兴趣区域定位系统,其特征在于:所述硬件平台还包括电源模块、VGA显示接口和USBOTG接口;
所述电源模块为TI公司TPS系列电源芯片;
所述VGA显示接口为ADV7511芯片和HDMI-VGA转接器;
所述USBOTG接口为TUSB1210芯片;
所述存储单元为SD卡和/或U盘;
所述FPGA和双核ARM9处理器为XiLinx公司的ZYNQ-7020芯片。
5.根据权利要求4所述的视线追踪及人眼感兴趣区域定位系统,其特征在于:红外人眼相机为320*240分辨率的近红外CMOS相机,前景相机为640*480分辨率的广角可见光CMOS相机。
6.根据权利要求5所述的视线追踪及人眼感兴趣区域定位系统,其特征在于:硬件平台通过存储在存储单元卡中的Linux操作系统,将Linux操作系统挂载在双核AMR9处理器内部。
7.根据权利要求6所述的视线追踪及人眼感兴趣区域定位系统,其特征在于:所述QT软件版本为4.8.1,所述OpenCV版本为2.4.11。
8.根据权利要求7所述的视线追踪及人眼感兴趣区域定位系统,其特征在于:所述红外人眼相机和前景相机分别通过USBOTG接口与硬件平台相连;所述显示输出设备通过VGA显示接口与硬件平台相连。
9.根据权利要求8所述的视线追踪及人眼感兴趣区域定位系统,其特征在于:所述视线追踪及人眼感兴趣区域定位系统还包括具有控制功能的外部设备,具有控制功能的外部设备是鼠标和键盘,所述鼠标和键盘均通过USBOTG接口与硬件平台相连。
CN201510944017.7A 2015-12-16 2015-12-16 视线追踪及人眼感兴趣区域定位系统 Expired - Fee Related CN105425967B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510944017.7A CN105425967B (zh) 2015-12-16 2015-12-16 视线追踪及人眼感兴趣区域定位系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510944017.7A CN105425967B (zh) 2015-12-16 2015-12-16 视线追踪及人眼感兴趣区域定位系统

Publications (2)

Publication Number Publication Date
CN105425967A true CN105425967A (zh) 2016-03-23
CN105425967B CN105425967B (zh) 2018-08-28

Family

ID=55504223

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510944017.7A Expired - Fee Related CN105425967B (zh) 2015-12-16 2015-12-16 视线追踪及人眼感兴趣区域定位系统

Country Status (1)

Country Link
CN (1) CN105425967B (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106020461A (zh) * 2016-05-13 2016-10-12 陈盛胜 基于眼球追踪技术的视频交互方法
CN106078356A (zh) * 2016-05-24 2016-11-09 北京工业大学 一种测量卡盘夹紧力的无线数据收发传感器电路版图结构
CN106200956A (zh) * 2016-07-07 2016-12-07 北京时代拓灵科技有限公司 一种虚拟现实领域多媒体呈现和交互的方法
CN107380064A (zh) * 2017-07-04 2017-11-24 上海青研科技有限公司 一种基于增强现实技术的车载视线追踪装置
CN107436675A (zh) * 2016-05-25 2017-12-05 深圳纬目信息技术有限公司 一种视觉交互方法、系统和设备
CN108073896A (zh) * 2017-11-24 2018-05-25 姜翠英 用户观看内容实时分析系统
CN108960045A (zh) * 2017-05-22 2018-12-07 宏达国际电子股份有限公司 眼球追踪方法、电子装置及非暂态电脑可读取记录媒体
CN109815409A (zh) * 2019-02-02 2019-05-28 北京七鑫易维信息技术有限公司 一种信息的推送方法、装置、穿戴设备及存储介质
CN110069960A (zh) * 2018-01-22 2019-07-30 北京亮亮视野科技有限公司 基于视线运动轨迹的拍摄控制方法、系统及智能眼镜
CN110275608A (zh) * 2019-05-07 2019-09-24 清华大学 人眼视线追踪方法
CN110276334A (zh) * 2019-06-28 2019-09-24 海马汽车有限公司 一种针对用户车辆使用情况的分析方法及系统
CN110758237A (zh) * 2018-07-27 2020-02-07 深圳富泰宏精密工业有限公司 电子装置及行车安全提醒方法
CN111712781A (zh) * 2018-02-09 2020-09-25 微软技术许可有限责任公司 具有硅光电倍增管传感器的高效的基于mems的眼睛追踪系统
US10991124B2 (en) 2019-01-29 2021-04-27 Institute For Information Industry Determination apparatus and method for gaze angle
CN113396257A (zh) * 2019-02-19 2021-09-14 神钢建机株式会社 工程机械的目标位置推定装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100110368A1 (en) * 2008-11-02 2010-05-06 David Chaum System and apparatus for eyeglass appliance platform
CN202548758U (zh) * 2012-04-11 2012-11-21 罗青 一种互动投影系统
CN103176607A (zh) * 2013-04-16 2013-06-26 重庆市科学技术研究院 一种眼控鼠标实现方法及系统
CN205563453U (zh) * 2015-12-16 2016-09-07 中国科学院西安光学精密机械研究所 视线追踪及人眼感兴趣区域定位系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100110368A1 (en) * 2008-11-02 2010-05-06 David Chaum System and apparatus for eyeglass appliance platform
CN202548758U (zh) * 2012-04-11 2012-11-21 罗青 一种互动投影系统
CN103176607A (zh) * 2013-04-16 2013-06-26 重庆市科学技术研究院 一种眼控鼠标实现方法及系统
CN205563453U (zh) * 2015-12-16 2016-09-07 中国科学院西安光学精密机械研究所 视线追踪及人眼感兴趣区域定位系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
侯树卫: "头戴式视线跟踪系统的一点标定方法", 《计算机应用与软件》 *

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106020461A (zh) * 2016-05-13 2016-10-12 陈盛胜 基于眼球追踪技术的视频交互方法
CN106078356A (zh) * 2016-05-24 2016-11-09 北京工业大学 一种测量卡盘夹紧力的无线数据收发传感器电路版图结构
CN107436675A (zh) * 2016-05-25 2017-12-05 深圳纬目信息技术有限公司 一种视觉交互方法、系统和设备
CN106200956A (zh) * 2016-07-07 2016-12-07 北京时代拓灵科技有限公司 一种虚拟现实领域多媒体呈现和交互的方法
CN108960045A (zh) * 2017-05-22 2018-12-07 宏达国际电子股份有限公司 眼球追踪方法、电子装置及非暂态电脑可读取记录媒体
CN107380064A (zh) * 2017-07-04 2017-11-24 上海青研科技有限公司 一种基于增强现实技术的车载视线追踪装置
CN107380064B (zh) * 2017-07-04 2022-08-19 上海青研科技有限公司 一种基于增强现实技术的车载视线追踪装置
CN108073896A (zh) * 2017-11-24 2018-05-25 姜翠英 用户观看内容实时分析系统
CN108073896B (zh) * 2017-11-24 2018-11-16 仲恺农业工程学院 用户观看内容实时分析系统
CN110069960A (zh) * 2018-01-22 2019-07-30 北京亮亮视野科技有限公司 基于视线运动轨迹的拍摄控制方法、系统及智能眼镜
CN111712781B (zh) * 2018-02-09 2023-08-25 微软技术许可有限责任公司 具有硅光电倍增管传感器的高效的基于mems的眼睛追踪系统
CN111712781A (zh) * 2018-02-09 2020-09-25 微软技术许可有限责任公司 具有硅光电倍增管传感器的高效的基于mems的眼睛追踪系统
CN110758237A (zh) * 2018-07-27 2020-02-07 深圳富泰宏精密工业有限公司 电子装置及行车安全提醒方法
US10991124B2 (en) 2019-01-29 2021-04-27 Institute For Information Industry Determination apparatus and method for gaze angle
CN109815409A (zh) * 2019-02-02 2019-05-28 北京七鑫易维信息技术有限公司 一种信息的推送方法、装置、穿戴设备及存储介质
CN113396257A (zh) * 2019-02-19 2021-09-14 神钢建机株式会社 工程机械的目标位置推定装置
CN113396257B (zh) * 2019-02-19 2022-07-08 神钢建机株式会社 工程机械的目标位置推定装置
CN110275608A (zh) * 2019-05-07 2019-09-24 清华大学 人眼视线追踪方法
CN110276334A (zh) * 2019-06-28 2019-09-24 海马汽车有限公司 一种针对用户车辆使用情况的分析方法及系统

Also Published As

Publication number Publication date
CN105425967B (zh) 2018-08-28

Similar Documents

Publication Publication Date Title
CN105425967A (zh) 视线追踪及人眼感兴趣区域定位系统
Mehrubeoglu et al. Real-time eye tracking using a smart camera
US20130321390A1 (en) Augmented books in a mixed reality environment
US9727132B2 (en) Multi-visor: managing applications in augmented reality environments
US20160131902A1 (en) System for automatic eye tracking calibration of head mounted display device
CN205563453U (zh) 视线追踪及人眼感兴趣区域定位系统
US9001036B2 (en) Systems and methods of camera-based fingertip tracking
EP3276451A1 (en) Electronic device for displaying graphic object and computer-readable recording medium
JP7339386B2 (ja) 視線追跡方法、視線追跡装置、端末デバイス、コンピュータ可読記憶媒体及びコンピュータプログラム
US11340708B2 (en) Gesture control of medical displays
US10701337B2 (en) Method for controlling multi-field of view image and electronic device for supporting the same
KR102546510B1 (ko) 복수의 입력 간에 매핑된 정보 제공 방법 및 이를 지원하는 전자 장치
CN107945607B (zh) 超声演示系统及装置
CN114078278A (zh) 注视点定位方法与装置、电子设备和存储介质
Aditya et al. Recent trends in HCI: A survey on data glove, LEAP motion and microsoft kinect
KR20150110032A (ko) 영상데이터 처리 전자장치 및 방법
CN109445598B (zh) 一种基于视觉的增强现实系统装置
CN105070204A (zh) 一种微型amoled光学显示器
US11682045B2 (en) Augmented reality advertisements on objects
CN107861244A (zh) 具热显像功能的穿戴式装置
KR20160068447A (ko) 이미지의 관심 영역 결정 방법 및 관심 영역 결정 장치
CN104123552A (zh) 一种可以自动识别的翻译眼镜
San Agustin et al. Gaze-based interaction with public displays using off-the-shelf components
CN111324274A (zh) 虚拟试妆方法、装置、设备及存储介质
TW201619754A (zh) 醫用影像物件化介面輔助解說控制系統及其方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20180828

Termination date: 20191216

CF01 Termination of patent right due to non-payment of annual fee