CN104318228A - 一种实现头戴式摄录设备获取最佳视野的方法 - Google Patents
一种实现头戴式摄录设备获取最佳视野的方法 Download PDFInfo
- Publication number
- CN104318228A CN104318228A CN201410675887.4A CN201410675887A CN104318228A CN 104318228 A CN104318228 A CN 104318228A CN 201410675887 A CN201410675887 A CN 201410675887A CN 104318228 A CN104318228 A CN 104318228A
- Authority
- CN
- China
- Prior art keywords
- eyeball
- shooting
- recording device
- wear
- people
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Abstract
一种实现头戴式摄录设备获取最佳视野的方法，在头戴式摄录设备上添加人眼球图像采集设备，专门针对人的一个眼球进行摄录，捕捉人的眼球的运动状况，将摄录到的图像进行眼珠标记，通过计算机建模并模拟两个眼珠的运动轨迹，根据获得的人的眼珠的轨迹图，并得到数据，将这些数据跟前摄录设备摄录到的画面进行相关性处理，会得到一组数据，而这组数据会在很多情况下没有很大变动的进行循环，提取循环数据，跟前摄像头摄录到的数据进行反相关运算，从而将画面进行扩充或者切割，实现最终画面最有效果的存储。同时，可以通过软件控制摄录摄像头根据人的眼珠的运动轨迹进行运动，从而实现最佳视野的摄录。
Description
技术领域
本发明涉及眼球捕捉技术和处理眼球追踪技术，一些相应的控制方法以及穿戴式摄录设备。
背景技术
近些年来眼球追踪技术发展迅速，在电脑或者手机上面都有运用，例如在三星和LG都推出了几款运用眼球追踪技术的手机，三星手机通过检测用户眼睛状态来控制锁屏的时间，也可以通过眼珠的上下移动来控制屏幕的上下滑动，眼球的左右移动来控制屏幕的左右翻页等，LG的手机可以识别人眼进行控制视频播放器的播放和停止，在人的眼睛看着手机界面，视频播放器处于播放状态时候，当人的眼睛离开手机页面时候，视频播放器会自动停止。另外在近些年的电脑游戏上也有人开发了运用眼球追踪技术的游戏，例如常见的切水果游戏，在辅助一定设备的时候，就可以实现用眼睛来进行切水果的游戏。在汽车上面也有运用，判断人眨眼的次数来进行人的疲劳判断，从而提醒开车人员不要疲劳驾驶。
近些年来发展起来的头戴式摄录设备，如谷歌眼镜，惠普眼镜，百度eye等，无一不是为了实现更好的摄录到人的眼镜看到的画面，但是因为硬件产品固有的稳定性和佩戴人的自然的抖动，摄录到的画画跟人眼所看到的画面还是有很大的差距。
头戴式摄录设备在进行画面摄录的过程当中，由于佩戴设备的人的头部在转时候摄录设备会随着转动，而此时所摄录到的画面可能跟人眼所看到的画面是不一样的。我们人眼所看到的内容定义成最佳视野，此时头戴式摄录设备所摄录到的画面就不是最佳视野。
发明内容
当人的眼睛看向不同方向时，眼部会有细微的变化，这些变化会产生可以提取的特征，计算机可以通过图像捕捉或扫描提取这些特征，从而实时追踪眼睛的变化，预测用户的状态和需求，并进行响应，达到用眼睛控制设备的目的。
在头戴式摄录设备上添加近眼摄像头，专门针对人的两个眼球进行摄录，就可以捕捉到人的眼球的运通状况，将摄录到的图像进行眼珠标记，通过计算机建模并模拟两个眼珠的运动轨迹，根据获得的人的眼珠的轨迹图，可以通过软件控制摄录摄像头根据人的眼珠的运动轨迹进行运动，从而实现最佳视野的摄录。
最佳视野是指头戴式摄录设备根据人眼所看到的内容摄录到的最佳的画面。
在头戴式摄录设备上添加近眼摄像头，专门针对人的一个眼球进行摄录，就可以捕捉到人的眼球的运动状况，将摄录到的图像进行眼珠标记，通过计算机建模并模拟两个眼珠的运动轨迹，根据获得的人的眼珠的轨迹图，可以软件控制摄录摄像头根据人的眼珠的运动轨迹进行运动，从而实现最佳视野的摄录。
在头戴式摄录设备上面添加红外线扫描，投射红外线光束到佩戴穿戴式摄录设备的人眼睛，根据红外线扫描到的信息，将扫描到的图像进行眼珠标记，通过计算机建模并模拟两个眼珠的运动轨迹，根据获得的人的眼珠的轨迹图，可以软件控制摄录摄像头根据人的眼珠的运动轨迹进行运动，从而实现最佳视野的摄录。
在头戴式摄录设备上添加人眼球图像采集设备，专门针对人的一个眼球进行摄录，就可以捕捉到人的眼球的运动状况，将摄录到的图像进行眼珠标记，通过计算机建模并模拟两个眼珠的运动轨迹，根据获得的人的眼珠的轨迹图，并得到数据，将这个数据跟前摄录设备摄录到的画面进行相关性处理，会得到一组数据，而这组数据会在很多情况下没有很大变动的进行循环，提取循环数据，跟前摄像头摄录到的数据进行反相关运算，从而将画面进行扩充或者切割，实现最终画面最有效果的存储。从而实现根据人的眼珠的运动获取的最佳视野的采集。
总之，本发明所要求保护的技术方案可以概括如下：
方案1、一种实现头戴式摄录设备获取最佳视野的方法，其特征在于：
在头戴式摄录设备上添加入眼特征采集设备，记录入的眼睛在摄录设备摄录的时候的运动画面；
将采集到的人眼运动画面进行眼珠标记，通过计算机建模并模拟眼珠的运动轨迹；
根据人限珠的运动轨迹，获得头戴式摄录设备的最佳视野。
方案2、根据方案1所述的实现头戴式摄录设备获取最佳视野的方法，其特征在于：其中人眼特征采集设备记录入的眼睛在摄录设备摄录的时候的运动画面是以下述方式进行记录的：所述人眼特征采集设备为近眼摄像头，根据近眼摄像头拍摄的眼球和眼球周边的特征变化进行跟踪记录，和/或所述人眼特征采集设备为人眼球图像采集设备，根据人眼球图像采集设备采集的虹膜角度变化进行跟踪记录，和/或所述人眼特征采集设备为近眼红外线扫描仪，根据近眼红外扫描仪主动投射红外线等光束到虹膜来提取特征进行跟踪记录。
方案3、根据方案1所述的实现头戴式摄录设备获取最佳视野的方法，其特征在于：其中将采集到的人眼球图像进行眼珠标记，通过计算机建模并模拟眼珠的运动轨迹是以下述方式进行的：根据记录到的画面，对人的眼珠的中心点进行定位，通过计算机处理获得眼珠的运动轨迹。
方案4、根据方案1-3任一项所述的实现头戴式摄录设备获取最佳视野的方法，其特征在于：所述根据人眼珠的运动轨迹，获得头戴式摄录设备的最佳视野的步骤是以下述方式实现的：根据获得的人的眼珠的轨迹图，可以通过软件控制头戴式摄录摄像头根据人的眼珠的运动轨迹进行运动，从而实现最佳视野的摄录。
方案5、根据方案1-3任一项所述的实现头戴式摄录设备获取最佳视野的方法，其特征在于：所述根据人眼珠的运动轨迹，获得头戴式摄录设备的最佳视野的步骤是以下述方式实现的：根据获得的人的眼珠的轨迹图，在计算机软件处理中，将头戴式摄录设备摄录到的画面直接经过与两个眼珠的运动轨迹相关性处理，根据相关性处理的结果进行调整，这样可以锁定人的眼珠所看到的画面，将拍摄到的画画的中心定义到人的眼珠所看到的画面，即最佳视野。
方案6、一种头戴式摄录设备，其特征在于：所述头戴式摄录设备可以实现根据方案1-5任一项所述的实现头戴式摄录设备获取最佳视野的方法。
附图说明
图1反馈调节摄像头示意图；
图2是根据眼球轨迹进行图像处理示意图；
具体实施方式
眼球追踪主要是研究眼球运动信息的获取、建模和模拟，一是根据眼球和眼球周边的特征变化进行跟踪，二是根据虹膜角度变化进行跟踪，三是主动投射红外线等光束到虹膜来提取特征。
图1为反馈调节摄像头示意图。在头戴式摄录设备上面添加一个人眼球图像采集设备，即专门摄录人的眼珠的近眼摄像头，记录人的眼珠在摄录设备摄录的时候的运动画面。
根据记录到的画面，对人的眼珠的中心点进行定位。通过计算机处理获得眼珠运动轨迹，即建模并模拟两个眼珠的运动轨迹，根据获得的人的眼珠的轨迹图，可以通过软件控制头戴式摄录摄像头根据人的眼珠的运动轨迹进行运动，从而实现最佳视野的摄录。
图2是根据眼球轨迹进行图像处理示意图。在头戴式摄录设备上面添加一个人眼球图像采集设备，即专门摄录人的眼珠的近眼摄像头，记录人的眼珠在摄录设备摄录的时候的运动画面。
根据记录到的画面，对人的眼珠的中心点进行定位。通过计算机处理获得眼珠运动轨迹，即建模并模拟两个眼珠的运动轨迹，根据获得的人的眼珠的轨迹图。在计算机软件处理中，将头戴式摄录设备摄录到的画面直接经过与两个眼珠的运动轨迹相关性处理，根据相关性处理的结果进行调整，这样可以锁定人的眼珠所看到的画面，将拍摄到的画面的中心定义到人的眼珠所看到的画面，即最佳视野。
尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同限定。
Claims (6)
1.一种实现头戴式摄录设备获取最佳视野的方法，其特征在于：
在头戴式摄录设备上添加人眼特征采集设备，记录人的眼睛在摄录设备摄录的时候的运动画面；
将采集到的人眼运动画面进行眼珠标记，通过计算机建模并模拟眼珠的运动轨迹；
根据人眼珠的运动轨迹，获得头戴式摄录设备的最佳视野。
2.根据权利要求1所述的实现头戴式摄录设备获取最佳视野的方法，其特征在于：其中人眼特征采集设备记录人的眼睛在摄录设备摄录的时候的运动画面是以下述方式进行记录的：所述人眼特征采集设备为近眼摄像头，根据近眼摄像头拍摄的眼球和眼球周边的特征变化进行跟踪记录，和/或所述人眼特征采集设备为人眼球图像采集设备，根据人眼球图像采集设备采集的虹膜角度变化进行跟踪记录，和/或所述人眼特征采集设备为近眼红外线扫描仪，根据近眼红外扫描仪主动投射红外线等光束到虹膜来提取特征进行跟踪记录。
3.根据权利要求1所述的实现头戴式摄录设备获取最佳视野的方法，其特征在于：其中将采集到的人眼球图像进行眼珠标记，通过计算机建模并模拟眼珠的运动轨迹是以下述方式进行的：根据记录到的画面，对人的眼珠的中心点进行定位，通过计算机处理获得眼珠的运动轨迹。
4.根据权利要求1-3任一项所述的实现头戴式摄录设备获取最佳视野的方法，其特征在于：所述根据人眼珠的运动轨迹，获得头戴式摄录设备的最佳视野的步骤是以下述方式实现的：根据获得的人的眼珠的轨迹图，可以通过软件控制头戴式摄录摄像头根据人的眼珠的运动轨迹进行运动，从而实现最佳视野的摄录。
5.根据权利要求1-3任一项所述的实现头戴式摄录设备获取最佳视野的方法，其特征在于：所述根据人眼珠的运动轨迹，获得头戴式摄录设备的最佳视野的步骤是以下述方式实现的：根据获得的人的眼珠的轨迹图，在计算机软件处理中，将头戴式摄录设备摄录到的画面直接经过与两个眼珠的运动轨迹相关性处理，根据相关性处理的结果进行调整，这样可以锁定人的眼珠所看到的画面，将拍摄到的画面的中心定义到人的眼珠所看到的画面，即最佳视野。
6.一种头戴式摄录设备，其特征在于：所述头戴式摄录设备可以实现根据权利要求1-5任一项所述的实现头戴式摄录设备获取最佳视野的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410675887.4A CN104318228A (zh) | 2014-11-24 | 2014-11-24 | 一种实现头戴式摄录设备获取最佳视野的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410675887.4A CN104318228A (zh) | 2014-11-24 | 2014-11-24 | 一种实现头戴式摄录设备获取最佳视野的方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN104318228A true CN104318228A (zh) | 2015-01-28 |
Family
ID=52373457
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201410675887.4A Pending CN104318228A (zh) | 2014-11-24 | 2014-11-24 | 一种实现头戴式摄录设备获取最佳视野的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104318228A (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105554384A (zh) * | 2015-12-17 | 2016-05-04 | 上海青橙实业有限公司 | 可穿戴设备及拍摄方法 |
| CN108416322A (zh) * | 2018-03-27 | 2018-08-17 | 吉林大学 | 一种虚拟装配坐式操作中目视动作识别方法 |
| CN109756721A (zh) * | 2018-12-20 | 2019-05-14 | 赤峰市医院 | 一种手术用3d直播或录像眼镜 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101172034A (zh) * | 2006-11-03 | 2008-05-07 | 上海迪康医学生物技术有限公司 | 一种眼球运动轨迹检测方法 |
| CN102521595A (zh) * | 2011-12-07 | 2012-06-27 | 中南大学 | 一种基于眼动数据和底层特征的图像感兴趣区域提取方法 |
| CN102914932A (zh) * | 2011-08-03 | 2013-02-06 | 浪潮乐金数字移动通信有限公司 | 一种利用摄像设备用户的眼睛来对焦的方法及摄像设备 |
| CN103699308A (zh) * | 2013-12-24 | 2014-04-02 | 惠州Tcl移动通信有限公司 | 一种自动翻页的方法及装置 |
| CN103869977A (zh) * | 2014-02-19 | 2014-06-18 | 小米科技有限责任公司 | 图像显示方法、装置和电子设备 |
-
2014
- 2014-11-24 CN CN201410675887.4A patent/CN104318228A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101172034A (zh) * | 2006-11-03 | 2008-05-07 | 上海迪康医学生物技术有限公司 | 一种眼球运动轨迹检测方法 |
| CN102914932A (zh) * | 2011-08-03 | 2013-02-06 | 浪潮乐金数字移动通信有限公司 | 一种利用摄像设备用户的眼睛来对焦的方法及摄像设备 |
| CN102521595A (zh) * | 2011-12-07 | 2012-06-27 | 中南大学 | 一种基于眼动数据和底层特征的图像感兴趣区域提取方法 |
| CN103699308A (zh) * | 2013-12-24 | 2014-04-02 | 惠州Tcl移动通信有限公司 | 一种自动翻页的方法及装置 |
| CN103869977A (zh) * | 2014-02-19 | 2014-06-18 | 小米科技有限责任公司 | 图像显示方法、装置和电子设备 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105554384A (zh) * | 2015-12-17 | 2016-05-04 | 上海青橙实业有限公司 | 可穿戴设备及拍摄方法 |
| CN105554384B (zh) * | 2015-12-17 | 2019-03-19 | 上海青橙实业有限公司 | 可穿戴设备及拍摄方法 |
| CN108416322A (zh) * | 2018-03-27 | 2018-08-17 | 吉林大学 | 一种虚拟装配坐式操作中目视动作识别方法 |
| CN108416322B (zh) * | 2018-03-27 | 2019-05-17 | 吉林大学 | 一种虚拟装配坐式操作中目视动作识别方法 |
| CN109756721A (zh) * | 2018-12-20 | 2019-05-14 | 赤峰市医院 | 一种手术用3d直播或录像眼镜 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11017691B2 (en) | Training using tracking of head mounted display | |
| CN103428461B (zh) | 一种授课影像录制的系统和方法 | |
| CN106170083B (zh) | 用于头戴式显示器设备的图像处理 | |
| CN105426827B (zh) | 活体验证方法、装置和系统 | |
| CN106407914B (zh) | 用于检测人脸的方法、装置和远程柜员机系统 | |
| CN107680069B (zh) | 一种图像处理方法、装置和终端设备 | |
| CN103336576B (zh) | 一种基于眼动追踪进行浏览器操作的方法及装置 | |
| CN108986189B (zh) | 基于三维动画中实时多人动作捕捉并直播的方法和系统 | |
| KR102106135B1 (ko) | 행동 인식 기반의 응용 서비스 제공 장치 및 그 방법 | |
| CN101587542A (zh) | 基于眼动轨迹跟踪的景深融合增强显示方法及系统 | |
| CN109819342A (zh) | 弹幕内容控制方法、装置、计算机设备和存储介质 | |
| DE102018102194A1 (de) | Elektronische Einrichtung, Informationsverarbeitungsverfahren und Programm | |
| CN107231531A (zh) | 一种网络虚拟现实技术与实拍结合影视制作系统 | |
| EP3646140B1 (en) | Systems and methods for displaying images in a virtual world environment | |
| CN111726518A (zh) | 用于捕获图像的系统和相机设备 | |
| CN106178476A (zh) | 一种数字排球训练系统 | |
| CN110121103A (zh) | 视频自动剪辑合成的方法及装置 | |
| CN109145788A (zh) | 基于视频的姿态数据捕捉方法和系统 | |
| Makantasis et al. | From pixels to affect: A study on games and player experience | |
| KR20200044714A (ko) | 카메라 워크를 재현하는 방법 및 장치 | |
| CN109002248B (zh) | Vr场景截图方法、设备及存储介质 | |
| CN115599219A (zh) | 一种显示屏的护眼控制方法、系统、设备及存储介质 | |
| CN104318228A (zh) | 一种实现头戴式摄录设备获取最佳视野的方法 | |
| CN113064490B (zh) | 一种基于眼动轨迹的虚拟增强设备的识别方法 | |
| CN106599779A (zh) | 一种人耳识别方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20150128 |