CN108182659A - 一种基于视点跟踪、单视角立体画的裸眼3d显示技术 - Google Patents

一种基于视点跟踪、单视角立体画的裸眼3d显示技术 Download PDF

Info

Publication number
CN108182659A
CN108182659A CN201810101401.4A CN201810101401A CN108182659A CN 108182659 A CN108182659 A CN 108182659A CN 201810101401 A CN201810101401 A CN 201810101401A CN 108182659 A CN108182659 A CN 108182659A
Authority
CN
China
Prior art keywords
viewpoint
camera
display screen
display
human eye
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810101401.4A
Other languages
English (en)
Inventor
周金润
刘宇
魏旭宸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201810101401.4A priority Critical patent/CN108182659A/zh
Publication of CN108182659A publication Critical patent/CN108182659A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/06Topological mapping of higher dimensional structures onto lower dimensional surfaces
    • G06T3/067Reshaping or unfolding 3D tree structures onto 2D planes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明涉及一种基于视点跟踪、单视角立体画的裸眼3D显示技术。主要解决现有现有的立体画都是只能从单一角度观看才有立体效果,且不能反映物体多角度的信息。该技术为a、建立一空间坐标系XYZ,于XY平面确定一矩形T,矩形T与显示屏长宽比相同,与显示屏对应;b、运用视点跟踪技术得出观看者人眼视点相对于显示屏的位置,矩形T对应显示屏,确定人眼视点E在空间坐标系XYZ上的位置;c、将需要显示的三维图像导入空间坐标系XYZ的相应位置,然后计算该图像关于点E在矩形T上的投影;d、将得出的投影显示在屏幕上。该裸眼3D显示技术可以多视角观看,展现物体多个角度的图像,且因本质是二维显示,不易使观看者产生视觉疲劳。

Description

一种基于视点跟踪、单视角立体画的裸眼3D显示技术
技术领域
本发明涉及一种基于视点跟踪、单视角立体画的裸眼3D显示技术。
背景技术
在计算机里显示3d图形,就是说在平面里显示三维图形。不像现实世界里,真实的三维空间,有真实的距离空间。计算机里只是看起来很像真实世界,因此在计算机显示的3d图形,就是让人眼看上就像真的一样。人眼有一个特性就是近大远小,就会形成立体感。
计算机屏幕是平面二维的,我们之所以能欣赏到真如实物般的三维图像,是因为显示在计算机屏幕上时色彩灰度的不同而使人眼产生视觉上的错觉,而将二维的计算机屏幕感知为三维图像。基于色彩学的有关知识,三维物体边缘的凸出部分一般显高亮度色,而凹下去的部分由于受光线的遮挡而显暗色。这一认识被广泛应用于网页或其他应用中对按钮、3d线条的绘制。
而目前现有裸眼3D显示技术的立体画都是只能从单一角度观看才有立体效果,且不能反映物体多角度的信息。
发明内容
为了克服背景技术的缺点与不足之处,本发明提供一种基于视点跟踪、单视角立体画的裸眼3D显示技术,主要解决现有现有的立体画都是只能从单一角度观看才有立体效果,且不能反映物体多角度的信息。
本发明的技术方案是:一种基于视点跟踪、单视角立体画的裸眼3D显示技术,对任意带有显示屏与相应硬件的设备,由人眼定位技术确定人眼位置并生成对应的单视角立体画,具体步骤如下:
a、建立一空间坐标系XYZ,于XY平面确定一矩形T,矩形T与显示屏长宽比相同,与显示屏对应;
b、运用视点跟踪技术得出观看者人眼视点相对于显示屏的位置,矩形T对应显示屏,确定人眼视点E在空间坐标系XYZ上的位置;
c、将需要显示的三维图像导入空间坐标系XYZ的相应位置,然后计算该图像关于点E在矩形T上的投影;
d、将得出的投影显示在屏幕上,即可生成对应此时观看者视点角度的立体画,达到裸眼3D显示效果。
所述视点跟踪技术为带有陀螺仪和加速度计的设备由观看者手动设定视点E初始位置,此次视点E确定之后,其在XYZ轴上的位置将只受设备角度变化的影响,当设备倾斜时,用陀螺仪、加速度计等得到设备角度变化数据,按照观看者眼睛没有移动的情况,相对地改变视点E在空间坐标系XYZ上的位置。
所述视点跟踪技术为对于带有摄像头的设备运用摄像头人眼检测、追踪技术确定观看者人眼相对摄像头的方向,然后按人正常观看设备时视点到显示屏的距离确定视点E的远近或使用动态人脸识别技术识别人脸,将摄像头画面中的人脸大小与人脸实际大小进行比对,计算得到观察者距摄像头的距离,以此确定视点E在空间坐标系XYZ上的位置。
所述视点跟踪技术为带有陀螺仪和加速度计以及摄像头的设备,通过结合摄像头的设备运用摄像头人眼检测、追踪技术确定观看者人眼相对摄像头的方向,然后按人正常观看时视点到显示屏的距离确定视点E的远近或使用动态人脸识别技术识别人脸,将摄像头画面中的人脸大小与人脸实际大小进行比对,计算得到观察者距摄像头的距离,以此确定视点E在空间坐标系XYZ上的位置,此次视点E确定之后,其在XYZ轴上的位置将只受手机角度变化的影响,当设备倾斜时,用陀螺仪、加速度计等得到手机角度变化数据,按照观看者眼睛没有移动的情况,相对地改变视点E在空间坐标系XYZ上的位置。
本发明具有以下有益效果:该裸眼3D显示技术可以多视角观看,展现物体多个角度的图像,且因本质是二维显示,不易使观看者产生视觉疲劳。
附图说明
图1为本发明的结构示意图。
图2为本发明的原理框图。
具体实施方式
下面针对附图对本发明的实施例作进一步说明:
一种基于视点跟踪、单视角立体画的裸眼3D显示技术,对任意带有显示屏与相应硬件的设备,其特征在于:由人眼定位技术确定人眼位置并生成对应的单视角立体画,具体步骤如下:a、建立一空间坐标系XYZ,于XY平面确定一矩形T,矩形T与显示屏长宽比相同,与显示屏对应;b、运用视点跟踪技术得出观看者人眼视点相对于显示屏的位置,矩形T对应显示屏,确定人眼视点E在空间坐标系XYZ上的位置;c、将需要显示的三维图像导入空间坐标系XYZ的相应位置,然后计算该图像关于点E在矩形T上的投影;d、将得出的投影显示在屏幕上,即可生成对应此时观看者视点角度的立体画,达到裸眼3D显示效果。以下为手机、电脑为例:
以手机为例:a建立一空间坐标系XYZ,于XY平面确定一矩形T,矩形T与手机显示屏长宽比相同,与手机显示屏对应。b运用视点跟踪技术(方案一或方案二)得出观看者人眼视点相对于手机显示屏的位置,矩形T对应手机显示屏,确定人眼视点E在空间坐标系XYZ上的位置。c将需要显示的三维图像导入空间坐标系XYZ的相应位置,然后计算该图像关于点E在矩形T上的投影。d将得出的投影显示在手机屏幕上,即可生成对应此时观看者视点角度的立体画,达到裸眼3D显示效果。采用上述方案,该裸眼3D显示技术可以多视角观看,展现物体多个角度的图像,且因本质是二维显示,不易使观看者产生视觉疲劳。
以电脑为例:a建立一空间坐标系XYZ,于XY平面确定一矩形T,矩形T与电脑显示屏长宽比相同,与电脑显示屏对应;b运用视点跟踪技术(方案二)得出观看者人眼视点相对于电脑显示屏的位置,矩形T对应电脑显示屏,确定人眼视点E在空间坐标系XYZ上的位置;c将需要显示的三维图像导入空间坐标系XYZ的相应位置,然后计算该图像关于点E在矩形T上的投影;d将得出的投影显示在电脑屏幕上,即可生成对应此时观看者视点角度的立体画,达到裸眼3D显示效果。
在本发明中,视点跟踪技术包括如下二种实现方案:
方案一:所述视点跟踪技术为带有陀螺仪和加速度计的设备由观看者手动设定视点E初始位置,此次视点E确定之后,其在XYZ轴上的位置将只受设备角度变化的影响,当设备倾斜时,用陀螺仪、加速度计等得到设备角度变化数据,按照观看者眼睛没有移动的情况,相对地改变视点E在空间坐标系XYZ上的位置。对于手机等带有陀螺仪和加速度计的设备,以手机为例:
此法要求使用时观看者视点不大幅度移动,手机位置不大幅度改变。由观看者手动设定视点E初始位置,或借助方案二中的技术确定视点E初始位置。此次视点E确定之后,其在XYZ轴上的位置将只受手机角度变化的影响。当手机倾斜时,用陀螺仪、加速度计等得到手机角度变化数据,按照观看者眼睛没有移动的情况,相对地改变视点E在空间坐标系XYZ上的位置。
方案二:所述视点跟踪技术为对于带有摄像头的设备运用摄像头人眼检测、追踪技术确定观看者人眼相对摄像头的方向,然后按人正常观看时视点到显示屏的距离确定视点E的远近或使用动态人脸识别技术识别人脸,将摄像头画面中的人脸大小与人脸实际大小进行比对,计算得到观察者距摄像头的距离,以此确定视点E在空间坐标系XYZ上的位置。此法对于带有摄像头的设备,以电脑为例:
运用摄像头人眼检测、追踪技术确定观看者人眼相对摄像头的方向,然后按人正常观看时视点到显示屏的距离确定视点E的远近或使用动态人脸识别技术识别人脸,将摄像头画面中的人脸大小与人脸实际大小进行比对,计算得到观察者距摄像头的距离,以此确定视点E在空间坐标系XYZ上的位置。

Claims (4)

1.一种基于视点跟踪、单视角立体画的裸眼3D显示技术,对任意带有显示屏与相应硬件的设备,其特征在于:由人眼定位技术确定人眼位置并生成对应的单视角立体画,具体步骤如下:
a、建立一空间坐标系XYZ,于XY平面确定一矩形T,矩形T与显示屏长宽比相同,与显示屏对应;
b、运用视点跟踪技术得出观看者人眼视点相对于显示屏的位置,矩形T对应显示屏,确定人眼视点E在空间坐标系XYZ上的位置;
c、将需要显示的三维图像导入空间坐标系XYZ的相应位置,然后计算该图像关于点E在矩形T上的投影;
d、将得出的投影显示在屏幕上,即可生成对应此时观看者视点角度的立体画,达到裸眼3D显示效果。
2.根据权利要求1所述的基于视点跟踪、单视角立体画的裸眼3D显示技术,其特征在于:所述视点跟踪技术为带有陀螺仪和加速度计的设备由观看者手动设定视点E初始位置,此次视点E确定之后,其在XYZ轴上的位置将只受设备角度变化的影响,当设备倾斜时,用陀螺仪、加速度计等得到设备角度变化数据,按照观看者眼睛没有移动的情况,相对地改变视点E在空间坐标系XYZ上的位置。
3.根据权利要求1所述的基于视点跟踪、单视角立体画的裸眼3D显示技术,其特征在于:所述视点跟踪技术为对于带有摄像头的设备运用摄像头人眼检测、追踪技术确定观看者人眼相对摄像头的方向,然后按人正常观看设备时视点到显示屏的距离确定视点E的远近或使用动态人脸识别技术识别人脸,将摄像头画面中的人脸大小与人脸实际大小进行比对,计算得到观察者距摄像头的距离,以此确定视点E在空间坐标系XYZ上的位置。
4.根据权利要求1所述的基于视点跟踪、单视角立体画的裸眼3D显示技术,其特征在于:所述视点跟踪技术为带有陀螺仪和加速度计以及摄像头的设备,通过结合摄像头的设备运用摄像头人眼检测、追踪技术确定观看者人眼相对摄像头的方向,然后按人正常观看时视点到显示屏的距离确定视点E的远近或使用动态人脸识别技术识别人脸,将摄像头画面中的人脸大小与人脸实际大小进行比对,计算得到观察者距摄像头的距离,以此确定视点E在空间坐标系XYZ上的位置,此次视点E确定之后,其在XYZ轴上的位置将只受设备角度变化的影响,当设备倾斜时,用陀螺仪、加速度计等得到设备角度变化数据,按照观看者眼睛没有移动的情况,相对地改变视点E在空间坐标系XYZ上的位置。
CN201810101401.4A 2018-02-01 2018-02-01 一种基于视点跟踪、单视角立体画的裸眼3d显示技术 Pending CN108182659A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810101401.4A CN108182659A (zh) 2018-02-01 2018-02-01 一种基于视点跟踪、单视角立体画的裸眼3d显示技术

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810101401.4A CN108182659A (zh) 2018-02-01 2018-02-01 一种基于视点跟踪、单视角立体画的裸眼3d显示技术

Publications (1)

Publication Number Publication Date
CN108182659A true CN108182659A (zh) 2018-06-19

Family

ID=62551994

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810101401.4A Pending CN108182659A (zh) 2018-02-01 2018-02-01 一种基于视点跟踪、单视角立体画的裸眼3d显示技术

Country Status (1)

Country Link
CN (1) CN108182659A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109933189A (zh) * 2018-12-28 2019-06-25 惠州Tcl移动通信有限公司 动态桌面布局方法、显示设备及计算机存储介质
CN110197524A (zh) * 2019-06-12 2019-09-03 腾讯科技(深圳)有限公司 立体显示方法、设备、装置和计算机可读存储介质
CN110390686A (zh) * 2019-07-24 2019-10-29 张天 裸眼3d显示方法及系统
CN110495895A (zh) * 2019-08-26 2019-11-26 重庆大学 一种基于眼动跟踪的疲劳检测方法与系统
CN112353361A (zh) * 2020-09-21 2021-02-12 南京速锋医疗科技有限公司 基于主从一体智能扶镜机器人的3d胸腹腔镜系统
CN112672139A (zh) * 2021-03-16 2021-04-16 深圳市火乐科技发展有限公司 投影显示方法、装置及计算机可读存储介质
CN115035825A (zh) * 2022-05-31 2022-09-09 中国第一汽车股份有限公司 显示裸眼3d图像的装置、显示3d图案的方法、设备及介质
WO2023056840A1 (zh) * 2021-10-09 2023-04-13 北京字节跳动网络技术有限公司 三维物体的显示方法、装置、设备及介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103279942A (zh) * 2013-04-10 2013-09-04 北京航空航天大学 一种基于环境感受器的2d屏幕上虚拟3d展示的控制方法
CN103354616A (zh) * 2013-07-05 2013-10-16 南京大学 在平面显示器上实现立体显示的方法和系统
US20150227112A1 (en) * 2013-03-22 2015-08-13 Shenzhen Cloud Cube Information Tech Co., Ltd. Display apparatus and visual displaying method for simulating a holographic 3d scene

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150227112A1 (en) * 2013-03-22 2015-08-13 Shenzhen Cloud Cube Information Tech Co., Ltd. Display apparatus and visual displaying method for simulating a holographic 3d scene
CN103279942A (zh) * 2013-04-10 2013-09-04 北京航空航天大学 一种基于环境感受器的2d屏幕上虚拟3d展示的控制方法
CN103354616A (zh) * 2013-07-05 2013-10-16 南京大学 在平面显示器上实现立体显示的方法和系统

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109933189A (zh) * 2018-12-28 2019-06-25 惠州Tcl移动通信有限公司 动态桌面布局方法、显示设备及计算机存储介质
CN110197524A (zh) * 2019-06-12 2019-09-03 腾讯科技(深圳)有限公司 立体显示方法、设备、装置和计算机可读存储介质
CN110197524B (zh) * 2019-06-12 2023-08-22 腾讯科技(深圳)有限公司 立体显示方法、设备、装置和计算机可读存储介质
CN110390686A (zh) * 2019-07-24 2019-10-29 张天 裸眼3d显示方法及系统
CN110495895A (zh) * 2019-08-26 2019-11-26 重庆大学 一种基于眼动跟踪的疲劳检测方法与系统
CN110495895B (zh) * 2019-08-26 2020-04-28 重庆大学 一种基于眼动跟踪的疲劳检测方法与系统
CN112353361A (zh) * 2020-09-21 2021-02-12 南京速锋医疗科技有限公司 基于主从一体智能扶镜机器人的3d胸腹腔镜系统
CN112672139A (zh) * 2021-03-16 2021-04-16 深圳市火乐科技发展有限公司 投影显示方法、装置及计算机可读存储介质
WO2023056840A1 (zh) * 2021-10-09 2023-04-13 北京字节跳动网络技术有限公司 三维物体的显示方法、装置、设备及介质
CN115035825A (zh) * 2022-05-31 2022-09-09 中国第一汽车股份有限公司 显示裸眼3d图像的装置、显示3d图案的方法、设备及介质

Similar Documents

Publication Publication Date Title
CN108182659A (zh) 一种基于视点跟踪、单视角立体画的裸眼3d显示技术
US11386611B2 (en) Assisted augmented reality
US10739936B2 (en) Zero parallax drawing within a three dimensional display
US10319104B2 (en) Method and system for determining datum plane
US9299183B2 (en) Detection of partially obscured objects in three dimensional stereoscopic scenes
US9041743B2 (en) System and method for presenting virtual and augmented reality scenes to a user
US20100110069A1 (en) System for rendering virtual see-through scenes
US9467685B2 (en) Enhancing the coupled zone of a stereoscopic display
US20050219695A1 (en) Horizontal perspective display
US10606347B1 (en) Parallax viewer system calibration
US9681122B2 (en) Modifying displayed images in the coupled zone of a stereoscopic display based on user comfort
US11659158B1 (en) Frustum change in projection stereo rendering
TWI657431B (zh) 動態顯示系統
US20060221071A1 (en) Horizontal perspective display
US20210318547A1 (en) Augmented reality viewer with automated surface selection placement and content orientation placement
WO2014108799A2 (en) Apparatus and methods of real time presenting 3d visual effects with stereopsis more realistically and substract reality with external display(s)
US20060250390A1 (en) Horizontal perspective display
US20190281280A1 (en) Parallax Display using Head-Tracking and Light-Field Display
US11057612B1 (en) Generating composite stereoscopic images usually visually-demarked regions of surfaces
Sweet et al. Depth perception, cueing, and control
US9600939B1 (en) Augmented reality platform using captured footage from multiple angles
US20170302904A1 (en) Input/output device, input/output program, and input/output method
Hieda et al. Digital facial augmentation for interactive entertainment
CN108391117A (zh) 一种基于视点定位、单视角立体画的手机裸眼3d显示技术
US20230070721A1 (en) Method, processing device, and display system for information display

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180619