CN114721144A - 裸视立体显示器及其控制方法 - Google Patents
裸视立体显示器及其控制方法 Download PDFInfo
- Publication number
- CN114721144A CN114721144A CN202110004046.0A CN202110004046A CN114721144A CN 114721144 A CN114721144 A CN 114721144A CN 202110004046 A CN202110004046 A CN 202110004046A CN 114721144 A CN114721144 A CN 114721144A
- Authority
- CN
- China
- Prior art keywords
- vector
- correction
- eyeball
- image
- eye
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 25
- 239000013598 vector Substances 0.000 claims abstract description 176
- 238000012937 correction Methods 0.000 claims abstract description 53
- 230000001133 acceleration Effects 0.000 claims abstract description 43
- 210000005252 bulbus oculi Anatomy 0.000 claims abstract description 39
- 238000003384 imaging method Methods 0.000 claims abstract description 22
- 210000001508 eye Anatomy 0.000 claims description 84
- 238000012545 processing Methods 0.000 claims description 10
- 239000011664 nicotinic acid Substances 0.000 description 8
- 230000004424 eye movement Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 230000003592 biomimetic effect Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 239000000126 substance Substances 0.000 description 2
- 101100365003 Mus musculus Scel gene Proteins 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
- G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/366—Image reproducers using viewer tracking
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
一种裸视立体显示器及其控制方法。裸视立体显示器的控制方法包括以下步骤。获得一眼球的一影像有效宽度。对眼球进行追踪,以获得一眼球移动向量、一移动速度向量及一移动加速度向量。依据影像有效宽度、移动速度向量及移动加速度向量,获得一个修正向量。依据修正向量修正眼球移动向量。依据修正后的眼球移动向量修正一单眼影像于多个像素的成像位置。
Description
技术领域
本发明是有关于一种显示器及其控制方法,且特别是有关于一种裸视立体显示器及其控制方法。
背景技术
随着显示技术的快速发展,发展出各种立体显示技术。其中裸视立体显示器不需要配带3D眼镜,就可以观赏立体影像。在便利性的驱使下,裸视立体显示器已逐渐成为立体显示技术的重要发展项目。
裸视立体显示器是透过柱状透镜阵列让左眼与右眼接收到不同的影像,以在脑海中呈现立体视觉。然而,一旦用户移动时,左眼与右眼将无法正确接收到预定的影像,而会产生立体视觉模糊的情况。
发明内容
本发明是有关于一种裸视立体显示器及其控制方法,其利用用户的速度与加速度,让成像位置能够进一步修正,减少成像与用户移动之间的落差。
根据本发明的第一方面,提出一种裸视立体显示器的控制方法。裸视立体显示器的控制方法包括以下步骤。获得一只眼球的一影像有效宽度。对眼球进行追踪,以获得一眼球移动向量、一移动速度向量及一移动加速度向量。依据影像有效宽度、移动速度向量及移动加速度向量,获得一修正向量。依据修正向量修正眼球移动向量。依据修正后的眼球移动向量修正一单眼影像于多个像素的成像位置。
根据本发明的第二方面,提出一种裸视立体显示器。裸视立体显示器包括一眼球追踪单元、一向量运算单元、一空间修正单元及一图像处理单元。眼球追踪单元用以追踪一眼球,以获得眼球的一眼球移动向量、一移动速度向量及一移动加速度向量。向量运算单元用以依据影像有效宽度、移动速度向量及移动加速度向量,获得一修正向量。空间修正单元用以依据修正向量修正眼球移动向量。图像处理单元用以依据修正后的眼球移动向量修正一单眼影像于多个像素的成像位置。
为了对本发明的上述及其他方面有更好的了解,下文特举实施例,并配合所附图式详细说明如下:
附图说明
图1示出了根据一实施例的裸视立体显示器的示意图。
图2示出了用户移动时,左眼所看到的左眼影像的亮度变化。
图3示出了根据一实施例的裸视立体显示器的方块图。
图4示出了根据一实施例的裸视立体显示器的控制方法的流程图。
图5示出了根据一实施例的仿生串扰曲线(bionic crosstalk)。
图6示出了根据一实施例的影像有效宽度及眼球与裸视立体显示器的一距离的关系。
图7示出了根据一实施例的左眼所看到的左眼影像的修正情况。
符号说明
100:裸视立体显示器
110:储存单元
120:眼球追踪单元
130:向量运算单元
140:空间修正单元
150:图像处理单元
160:显示面板
C1,C2,C3:亮度曲线
LD:影像有效宽度
LE:左眼
LF:左眼影像
LR:左眼的最大亮度范围
LS:柱状透镜阵列
LZ:左眼的距离
P1,P2:位置
RD:右眼的影像有效宽度
RE:右眼
RF:右眼的右眼影像
RZ:右眼的距离
S110,S120,S130,S140,S150,S160:步骤
TB:对照表
US:用户
具体实施方式
请参照图1,其示出了根据一实施例的裸视立体显示器100的示意图。裸视立体显示器100主要是让部分像素显示左眼影像LF,并透过一柱状透镜阵列LS让左眼影像LF成功成像于左眼LE;并且让其余像素显示右眼影像RF,并透过柱状透镜阵列LS让右眼影像RF成功成像于右眼RE。
请参照图2,其示出了用户US移动时,左眼LE所看到的左眼影像LF的亮度变化。当裸视立体显示器100在部分像素上显示左眼影像LF时,在柱状透镜阵列LS的前方会形成区域性的聚焦。因此,当用户US向右移动时,左眼LE接收到的亮度会随着移动变大或变小。如图2所示,柱状透镜阵列LS的前方形成多个最大亮度范围LR。每一最大亮度范围LR的宽度即为影像有效宽度LD。只有当左眼LE落于最大亮度范围LR内时,才能够让左眼影像LF成功成像于左眼LE。当左眼LE落于最大亮度范围LR之外时,左眼影像LF无法正确成像于左眼LE。
因此,当用户US移动时,左眼影像LF可能无法正确成像于左眼LE,右眼影像RF也可能无法正确成像于右眼RE。研究人员发现,在用户US移动时,若欲使左眼影像LF能够依然正确成像于左眼LE,必须根据左眼LE的移动修正左眼影像LF于这些像素的成像位置;同样的,若欲使右眼影像RF能够依然正确成像于右眼RE,必须根据右眼RE的移动修正右眼影像RF到这些像素的成像位置。
为了进行上述的修正,必须进行眼球位置追踪程序与成像位置修正程序。然而,眼球位置追踪程序与成像位置修正程序都需要耗费一定的时间进行处理与运算,因此无法跟上用户US的移动,而无法让左眼影像LF正确成像于左眼LE,也无法让右眼影像RF正确成像于右眼RE。
为了让左眼影像LF能够正确成像于左眼LE,也让右眼影像RF能够正确成像于右眼RE,研究人员进一步考虑了用户US的速度与加速度,让成像位置能够进一步修正。请参照图3,其示出了根据一实施例的裸视立体显示器100之方块图。裸视立体显示器100包括一储存单元110、一眼球追踪单元120、一向量运算单元130、一空间修正单元140、一图像处理单元150及一显示面板160。各项元件的功能概述如下。储存单元110用以储存数据。眼球追踪单元120用以进行眼球追踪程序。向量运算单元130用以进行向量运算。空间修正单元140用以进行三维空间位置的修正。图像处理单元150用以进行成像程序。显示面板160用以显示影像。储存单元110例如是一存储器、一硬盘或一云端数据中心。眼球追踪单元120例如是一深度相机或一点云相机。向量运算单元130、空间修正单元140及图像处理单元150例如是一程序代码、一电路、一芯片、一电路板、或储存程序代码的储存装置。在本实施例中,透过向量运算单元130及空间修正单元140考虑了用户US的速度与加速度,让成像位置能够进一步修正,以减少成像与用户US移动之间的落差。以下更搭配一流程图详细说明上述各项元件的运作。
请参照图4,其示出了根据一实施例的裸视立体显示器100的控制方法的流程图。在步骤S110中,获得一眼球的一影像有效宽度。以下先以左眼LE的影像有效宽度LD为例进行说明。请参照图5,其示出了根据一实施例的仿生串扰曲线(bionic crosstalk)。图5的仿生串扰曲线描述的是针对左眼LE的量测结果,其计算方式例如是按照下式(1)。
LBC=(RWB-RBB)/(LWB-LBB+RWB-RBB)……………(1)
其中,LBC为左眼LE的仿生串扰百分比,RWB为右眼RE接收到左眼影像LF全白且右眼影像全黑的亮度值,RBB为右眼RE接收到左眼影像LF全黑且右眼影像全黑的亮度值,LWB为左眼LE接收到左眼影像LF全白且右眼影像全黑的亮度值,LBB为左眼LE接收到左眼影像LF全黑且右眼影像全黑的亮度值。如图5所示,仿生串扰百分比在一预定百分比以下的范围可以定义为左眼LE的影像有效宽度LD。预定百分比例如是10%。
请参照图6,其示出了根据一实施例的影像有效宽度LD及左眼LE与裸视立体显示器100的一距离LZ的关系。左眼LE的仿生串扰曲线会随着距离LZ改变,因此影像有效宽度LD相关于距离LZ。在一实施例中,储存单元110(于图3所示)可以储存影像有效宽度LD与距离LZ的照表TB。向量运算单元130自眼球追踪单元120取得距离LZ且自储存单元110取得对照表TB后,即可获得影像有效宽度LD。
k例如是0.5~1.2。
然后,在步骤S150中,图像处理单元150依据修正后的眼球移动向量修正一单眼影像(例如是左眼影像LF)到像素的成像位置。依据上述眼球移动向量可以计算出预测眼球坐标,再使用司乃尔定律并配合透镜几何关系反向计算所对应的像素的成像位置。
接着,在步骤S160中,显示面板160按照成像位置显示单眼影像(例如是左眼影像LF)。
类似的,针对右眼RE的右眼影像RF,亦可按照上述流程进行显示。在步骤S110中,获得右眼RE的影像有效宽度RD。针对右眼RE的影像有效宽度RD,则可利用下式(4)绘制出仿生串扰曲线(未示出)。
RBC=(LWB-LBB)/(LWB-LBB+RWB-RBB)……………(4)
其中,RBC为右眼RE的仿生串扰百分比。
接着,在步骤S160中,显示面板160按照成像位置显示右眼影像RF。
请参照图7,其示出了根据一实施例的左眼LE所看到的左眼影像LF的修正情况。当左眼LE由位置P1移动至位置P2时,若不进行任何修正,左眼影像LF的亮度曲线C1的最高值无法对准于左眼LE。
根据上述实施例,裸视立体显示器100及其控制方法考虑了用户的速度与加速度,让成像位置能够进一步修正,减少成像与用户移动之间的落差。
综上所述,虽然本发明已经示出了上述实施例,然其并非用以限定本发明。本发明所属技术领域的技术人员,在不脱离本发明的精神和范围内,当可作各种的更动与润饰。因此,本发明的保护范围当视权利要求所界定者为准。
Claims (12)
1.一种裸视立体显示器的控制方法,其特征在于,包括:
获得一眼球的一影像有效宽度;
对该眼球进行追踪,以获得一眼球移动向量、一移动速度向量及一移动加速度向量;
依据该影像有效宽度、该移动速度向量及该移动加速度向量,获得一修正向量;
依据该修正向量修正该眼球移动向量;以及
依据修正后的该眼球移动向量修正一单眼影像于多个像素的成像位置。
2.如权利要求1所述的裸视立体显示器的控制方法,其特征在于,该修正向量的方向相关于该移动速度向量的方向。
3.如权利要求1所述的裸视立体显示器的控制方法,其特征在于,该修正向量的数值相关于该移动速度向量与该移动加速度向量的方向一致性。
4.如权利要求1所述的裸视立体显示器的控制方法,其特征在于,该修正向量的数值相关于该移动加速度向量的大小。
5.如权利要求1所述的裸视立体显示器的控制方法,其特征在于,该修正向量的数值相关于一加权修正系数,该加权修正系数为0.5~1.2。
6.如权利要求1所述的裸视立体显示器的控制方法,其特征在于,该影像有效宽度相关于该眼球与该裸视立体显示器的一距离。
7.一种裸视立体显示器,其特征在于,包括:
一眼球追踪单元,用以追踪一眼球,以获得该眼球的一眼球移动向量、一移动速度向量及一移动加速度向量;
一向量运算单元,用以依据一影像有效宽度、该移动速度向量及该移动加速度向量,获得一修正向量;
一空间修正单元,用以依据该修正向量修正该眼球移动向量;以及
一图像处理单元,用以依据修正后的该眼球移动向量修正一单眼影像于多个像素的成像位置。
8.如权利要求7所述的裸视立体显示器,其特征在于,该修正向量的方向相关于该移动速度向量的方向。
9.如权利要求7所述的裸视立体显示器,其特征在于,该修正向量的数值相关于该移动速度向量与该移动加速度向量的方向一致性。
10.如权利要求7所述的裸视立体显示器,其特征在于,该修正向量的数值相关于该移动加速度向量的大小。
11.如权利要求7所述的裸视立体显示器,其特征在于,该修正向量的数值相关于一加权修正系数,该加权修正系数为0.5~1.2。
12.如权利要求7所述的裸视立体显示器,其特征在于,该影像有效宽度相关于该眼球与该裸视立体显示器的一距离。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110004046.0A CN114721144A (zh) | 2021-01-04 | 2021-01-04 | 裸视立体显示器及其控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110004046.0A CN114721144A (zh) | 2021-01-04 | 2021-01-04 | 裸视立体显示器及其控制方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114721144A true CN114721144A (zh) | 2022-07-08 |
Family
ID=82235018
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110004046.0A Pending CN114721144A (zh) | 2021-01-04 | 2021-01-04 | 裸视立体显示器及其控制方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114721144A (zh) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012070040A (ja) * | 2010-09-21 | 2012-04-05 | Jvc Kenwood Corp | 立体映像撮像装置および立体映像撮像方法 |
CN103069821A (zh) * | 2010-08-09 | 2013-04-24 | 索尼电脑娱乐公司 | 图像显示装置、图像显示方法及图像修正方法 |
CN103595987A (zh) * | 2012-07-31 | 2014-02-19 | Nlt科技股份有限公司 | 立体图像显示装置、图像处理装置及图像处理方法 |
CN107516335A (zh) * | 2017-08-14 | 2017-12-26 | 歌尔股份有限公司 | 虚拟现实的图形渲染方法和装置 |
CN108156441A (zh) * | 2016-12-06 | 2018-06-12 | 谷歌有限责任公司 | 视觉视频稳定 |
CN110488982A (zh) * | 2019-08-26 | 2019-11-22 | 业成科技(成都)有限公司 | 透过眼球追踪电子白板之装置 |
TW202004421A (zh) * | 2018-05-17 | 2020-01-16 | 日商索尼互動娛樂股份有限公司 | 用於在hmd環境中利用傳至gpu之預測及後期更新的眼睛追蹤進行快速注視點渲染 |
CN111665932A (zh) * | 2019-03-05 | 2020-09-15 | 宏达国际电子股份有限公司 | 头戴式显示装置以及其眼球追踪装置 |
-
2021
- 2021-01-04 CN CN202110004046.0A patent/CN114721144A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103069821A (zh) * | 2010-08-09 | 2013-04-24 | 索尼电脑娱乐公司 | 图像显示装置、图像显示方法及图像修正方法 |
JP2012070040A (ja) * | 2010-09-21 | 2012-04-05 | Jvc Kenwood Corp | 立体映像撮像装置および立体映像撮像方法 |
CN103595987A (zh) * | 2012-07-31 | 2014-02-19 | Nlt科技股份有限公司 | 立体图像显示装置、图像处理装置及图像处理方法 |
CN108156441A (zh) * | 2016-12-06 | 2018-06-12 | 谷歌有限责任公司 | 视觉视频稳定 |
CN107516335A (zh) * | 2017-08-14 | 2017-12-26 | 歌尔股份有限公司 | 虚拟现实的图形渲染方法和装置 |
TW202004421A (zh) * | 2018-05-17 | 2020-01-16 | 日商索尼互動娛樂股份有限公司 | 用於在hmd環境中利用傳至gpu之預測及後期更新的眼睛追蹤進行快速注視點渲染 |
CN111665932A (zh) * | 2019-03-05 | 2020-09-15 | 宏达国际电子股份有限公司 | 头戴式显示装置以及其眼球追踪装置 |
CN110488982A (zh) * | 2019-08-26 | 2019-11-22 | 业成科技(成都)有限公司 | 透过眼球追踪电子白板之装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3350989B1 (en) | 3d display apparatus and control method thereof | |
EP2357838B1 (en) | Method and apparatus for processing three-dimensional images | |
US8908011B2 (en) | Three-dimensional video creating device and three-dimensional video creating method | |
US9881421B2 (en) | Image processing | |
US9053575B2 (en) | Image processing apparatus for generating an image for three-dimensional display | |
US7486817B2 (en) | Apparatus for and method of generating image, and computer program product | |
US9294755B2 (en) | Correcting frame-to-frame image changes due to motion for three dimensional (3-D) persistent observations | |
CN103392342B (zh) | 视区调整的方法和装置、能实现立体显示视频信号的设备 | |
US8704881B2 (en) | Stereoscopic image display apparatus | |
US8606043B2 (en) | Method and apparatus for generating 3D image data | |
JP2014045473A (ja) | 立体画像表示装置、画像処理装置及び立体画像処理方法 | |
US20120320045A1 (en) | Image Processing Method and Apparatus Thereof | |
US20160044305A1 (en) | Multiview image display apparatus and control method thereof | |
US10939092B2 (en) | Multiview image display apparatus and multiview image display method thereof | |
US9344712B2 (en) | Image processing device, image processing method, computer program product, and image display device | |
JP5127973B1 (ja) | 映像処理装置、映像処理方法および映像表示装置 | |
CN112929638B (zh) | 眼部定位方法、装置及多视点裸眼3d显示方法、设备 | |
CN103051909B (zh) | 用于裸眼3d显示的蒙版变换人眼跟踪方法 | |
US20220201276A1 (en) | Naked eye stereoscopic display and control method thereof | |
US10152803B2 (en) | Multiple view image display apparatus and disparity estimation method thereof | |
JP2011211551A (ja) | 画像処理装置および画像処理方法 | |
CN114721144A (zh) | 裸视立体显示器及其控制方法 | |
WO2012169173A1 (ja) | 視差画像生成装置、視差画像生成方法、プログラムおよび集積回路 | |
US11785203B2 (en) | Information processing apparatus, information processing method, and program | |
JP5343159B1 (ja) | 画像処理装置、画像処理方法および画像処理プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20220708 |