CN114967170A - 基于柔性裸眼三维显示设备的显示处理方法及其装置 - Google Patents

基于柔性裸眼三维显示设备的显示处理方法及其装置 Download PDF

Info

Publication number
CN114967170A
CN114967170A CN202110190457.3A CN202110190457A CN114967170A CN 114967170 A CN114967170 A CN 114967170A CN 202110190457 A CN202110190457 A CN 202110190457A CN 114967170 A CN114967170 A CN 114967170A
Authority
CN
China
Prior art keywords
display
pixel
lens
dimensional
light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110190457.3A
Other languages
English (en)
Other versions
CN114967170B (zh
Inventor
廖洪恩
黄天琪
李瑞洋
张欣然
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tsinghua University
Original Assignee
Tsinghua University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tsinghua University filed Critical Tsinghua University
Priority to CN202110190457.3A priority Critical patent/CN114967170B/zh
Publication of CN114967170A publication Critical patent/CN114967170A/zh
Application granted granted Critical
Publication of CN114967170B publication Critical patent/CN114967170B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/27Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving lenticular arrays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/398Synchronisation thereof; Control thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)

Abstract

本发明提供一种基于柔性裸眼三维显示设备的显示处理方法及其装置,通过对显示设备中的任一像素,从接收到所述任一像素当前发射的像素光线的透镜中确定目标透镜;若所述目标透镜不是所述任一像素对应的设定透镜,则根据所述目标透镜对应的显示内容调整所述任一像素的显示内容;实现了在柔性裸眼三维显示设备发生形变时,及时对显示设备中发生形变部分的像素的显示内容进行调整,实现对显示设备生成的光场的优化,消除了由显示设备的形变导致的最终显示出的三维模型的畸变,优化了三维模型的显示效果,提高了用户的观看体验。

Description

基于柔性裸眼三维显示设备的显示处理方法及其装置
技术领域
本发明涉及柔性裸眼三维显示技术领域,尤其涉及一种基于柔性裸眼三维显示设备的显示处理方法及其装置。
背景技术
现有典型的裸眼三维显示技术包括基于投影的三维显示技术和基于二维固定屏幕的三维显示技术。基于投影的三维显示技术依靠投影仪提供光场数据源,通过光栅对投影的数据进行调制。由于投影仪的成像需要一定的空间距离,该技术无法达到便携化可移动的效果。另一方面,基于二维固定屏幕的三维显示技术包括视差光栅、集成成像、柱透镜成像等技术,通过二维显示器和光栅(或者柱透镜、透镜阵列)实现光场的调制,因此,传统的裸眼三维显示技术没有柔性可变性的潜能。
目前的柔性裸眼三维显示薄膜器件是通过将二维显示器和光栅都换成柔性器件,实现裸眼三维显示技术;但是所产生的显示光场随着二维显示器与光栅的形变,也会发生形变,造成显示的三维图像在显示器形变过程中产生无法矫正的图像三维畸变,对三维图像的显示效果造成较大的影响。
由此可见,现有的柔性裸眼三维显示设备在发生形变时,显示设备中的显示光线会偏离显示设备的可视角度范围,从而导致显示设备的光场发生形变,根据光场渲染出的三维模型也会产生畸变,对三维模型的显示效果造成较大的影响。
发明内容
本发明提供一种基于柔性裸眼三维显示设备的显示处理方法及其装置,用以解决现有技术中的柔性裸眼三维显示设备在发生形变时,显示设备中的显示光线会偏离显示设备的可视角度范围,从而导致显示设备的光场发生形变,根据光场渲染出的三维模型也会产生畸变,对三维模型的显示效果造成较大的影响的缺陷,实现在柔性裸眼三维显示设备发生形变时,及时对显示设备中发生形变部分的像素的显示内容进行调整,实现对显示设备生成的光场的优化,消除了由显示设备的形变导致的最终显示出的三维模型的畸变,优化了三维模型的显示效果,提高了用户的观看体验。
本发明提供一种基于柔性裸眼三维显示设备的显示处理方法,包括:
对显示设备中的任一像素,从接收到所述任一像素当前发射的像素光线的透镜中确定目标透镜;其中,所述目标透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内;
若所述目标透镜不是所述任一像素对应的设定透镜,则根据所述目标透镜对应的显示内容调整所述任一像素的显示内容;其中,所述设定透镜接收到所述任一像素在所述显示设备未发生形变时发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内。
进一步的,根据本发明提供的一种基于柔性裸眼三维显示设备的显示处理方法,还包括:
若所述显示设备中不存在所述目标透镜,则控制所述任一像素停止发射所述像素光线。
进一步的,根据本发明提供的一种基于柔性裸眼三维显示设备的显示处理方法,所述从接收到所述任一像素当前发射的像素光线的透镜中确定目标透镜,包括:
循环执行目标透镜确定步骤,直到当前待定透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内,将当前待定透镜作为所述目标透镜;
其中,所述目标透镜确定步骤包括:
从接收到所述任一像素当前发射的像素光线的透镜中,获取任一未遍历到的透镜作为当前待定透镜,判断当前待定透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线是否在所述显示设备的可视角度范围内。
进一步的,根据本发明提供的一种基于柔性裸眼三维显示设备的显示处理方法,所述判断当前待定透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线是否在所述显示设备的可视角度范围内,包括:
根据所述任一像素的中心坐标与所述当前待定透镜的中心坐标,获取用于表示所述当前待定透镜生成的显示光线的空间坐标;
根据所述空间坐标,计算所述当前待定透镜生成的显示光线相对于第一平面的倾角;其中,所述第一平面为所述显示设备未发生形变时所述当前待定透镜所在平面;
若所述倾角在所述可视角度范围内,则确定所述当前待定透镜生成的显示光线在所述显示设备的可视角度范围内。
进一步的,根据本发明提供的一种基于柔性裸眼三维显示设备的显示处理方法,所述根据所述空间坐标,计算所述当前待定透镜生成的显示光线相对于第一平面的倾角,包括:
根据所述空间坐标,确定所述当前待定透镜生成的显示光线所在的直线与所述第一平面的第一交点坐标、所述当前待定透镜生成的显示光线所在的直线与第二平面的第二交点坐标;其中,所述第二平面为所述显示设备未发生形变时所述任一显示像素所在平面;
通过所述第一交点坐标和所述第二交点坐标,计算所述当前待定透镜生成的显示光线的发射倾角。
进一步的,根据本发明提供的一种基于柔性裸眼三维显示设备的显示处理方法,所述根据所述目标透镜对应的显示内容调整所述任一像素的显示内容,包括:
在通过所述显示设备显示的三维模型中,确定通过所述目标透镜显示的三维模型单元;
将用于显示所述三维模型单元的像素内容,作为所述任一像素的显示内容。
进一步的,根据本发明提供的一种基于柔性裸眼三维显示设备的显示处理方法,在根据所述目标透镜对应的显示内容调整所述任一像素的显示内容之后,还包括:
获取在对所述显示设备的每一像素的显示内容进行调整后得到的光场,作为优化后光场;
根据所述优化后光场,优化通过所述显示设备显示的三维模型。
本发明还提供一种基于柔性裸眼三维显示设备的显示处理装置,包括:
确定模块,用于对显示设备中的任一像素,从接收到所述任一像素当前发射的像素光线的透镜中确定目标透镜;其中,所述目标透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内;
调整模块,用于若所述目标透镜不是所述任一像素对应的设定透镜,则根据所述目标透镜对应的显示内容调整所述任一像素的显示内容;其中,所述设定透镜接收到所述任一像素在所述显示设备未发生形变时发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内。
本发明还提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如上述任一种所述基于柔性裸眼三维显示设备的显示处理方法的步骤。
本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如上述任一种所述基于柔性裸眼三维显示设备的显示处理方法的步骤。
本发明提供的一种基于柔性裸眼三维显示设备的显示处理方法及其装置,通过对显示设备中的任一像素,从接收到所述任一像素当前发射的像素光线的透镜中确定目标透镜;若所述目标透镜不是所述任一像素对应的设定透镜,则根据所述目标透镜对应的显示内容调整所述任一像素的显示内容;实现了在柔性裸眼三维显示设备发生形变时,及时对显示设备中发生形变部分的像素的显示内容进行调整,实现对显示设备生成的光场的优化,消除了由显示设备的形变导致的最终显示出的三维模型的畸变,优化了三维模型的显示效果,提高了用户的观看体验。
附图说明
为了更清楚地说明本发明或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的基于柱透镜的柔性裸眼三维显示设备的结构示意图;
图2是本发明另一实施例提供的基于微透镜的柔性裸眼三维显示设备的结构示意图;
图3是本发明提供的基于柔性裸眼三维显示设备的显示处理方法的流程示意图;
图4为本发明另一实施例提供的像素光线更新示意图;
图5为本发明另一实施例提供的基于柔性裸眼三维显示设备建立的三维坐标系示意图;
图6为本发明另一实施例提供的表示显示光线的空间坐标简化方法示意图;
图7为本发明另一实施例提供的针对裸眼三维显示的柔性可形变三维显示方法的流程示意图;
图8为本发明另一实施例提供的使用投影装置代替柔性显示器得显示装置示意图;
图9为本发明另一实施例提供的使用力学传感器获取三维显示器的形变模型的示意图;
图10为本发明另一实施例提供的根据建模的柔性可形变三维显示设备计算显示光场的流程图;
图11为本发明另一实施例提供的透镜与像素对应关系示意图;
图12为本发明实施例提供的基于柔性裸眼三维显示设备的显示处理装置的结构示意图;
图13是本发明实施例提供的电子设备的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明中的附图,对本发明中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
首先,对裸眼三维显示装置进行介绍。
随着医疗、电子、信息技术的发展,普通的二维显示越来越不能够满足人们对视觉信息的需求,在3D电影、视觉导航、游戏等领域中,三维显示技术越来越成为一种重要的趋势。其中,裸眼三维显示技术作为三维显示技术中重要的组成部分具有不可替代的优势,如连续的运动视差、可多人观察、三维实时渲染、不需要辅助设备、不易发生视觉疲劳等。
裸眼三维显示装置指利用投影或二维显示屏经过光学器件调制后能够在空间中实现虚拟物体的三维光场,观察者不需要额外设备就可以直接观察到三维虚拟图像。裸眼三维显示包括基于柱透镜、视差光栅、微透镜(圆透镜)阵列或其他透镜的三维显示技术。
具体的,图1为本发明实施例提供的基于柱透镜的柔性裸眼三维显示设备的结构示意图,图2为本发明另一实施例提供的基于微透镜的柔性裸眼三维显示设备的结构示意图。
以裸眼三维显示设备为基础,用柔性器件代替原有显示器中的刚性器件。对于投影式的三维显示,采用柔性背投屏代替原本的背投屏幕。对于采用平面显示器的三维显示设备,采用柔性屏代替硬性屏幕。参见图1、图2,对柱透镜阵列或微透镜阵列,以柔性塑料材质为基底代替玻璃或硬性塑料材质,并在柱透镜或微透镜排列时留出一定的空隙以适应整个器件的形变。透镜仍使用硬性塑料或玻璃,以防止透镜形变带来的透镜参数变化。当使用柱透镜时,只支持一个方向的形变。对光栅调制元件,可以采用柔性材料制造光栅。由此,可以令裸眼三维显示器中所用的元件都具有一定的形变能力。本实施例中,以基于柱透镜和微透镜为光线调制元件的柔性裸眼三维显示设备,对该基于柔性裸眼三维显示设备的显示处理方法及其装置进行说明。
下面结合图3-图10描述本发明的基于柔性裸眼三维显示设备的显示处理方法。
图3为本发明提供一种基于柔性裸眼三维显示设备的显示处理方法的流程示意图。参见图3,基于柔性裸眼三维显示设备的显示处理方法包括:
步骤301:对显示设备中的任一像素,从接收到所述任一像素当前发射的像素光线的透镜中确定目标透镜;其中,所述目标透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内;
在基于柔性裸眼三维显示设备中,使用柔性材料代替原有显示设备中的刚性器件,使得显示设备具有了形变能力。当显示设备发生了形变后,显示设备中的一个像素发出的光线,可以被多个透镜接收到,但是透镜在接收到该像素发出的光线后,生成的显示光线具有着不同的方向,可以通过判断一个透镜所发出的显示光线是否在显示设备的可视角度范围内;若该透镜接收到该像素发出的光线后,生成的显示光线不在可视角度范围内,继续判断接收到任一像素发射的像素光线的其他透镜发出的显示光线,是否在可视角度范围内,并最终确定出目标透镜。
具体的,在显示设备实际的形变过程中,像素发生旋转和位移的幅度比较小,因此可以只需要判断与该像素距离较近的几个透镜即可,这样可以大幅减少确定目标透镜的时间。
步骤302:若所述目标透镜不是所述任一像素对应的设定透镜,则根据所述目标透镜对应的显示内容调整所述任一像素的显示内容;其中,所述设定透镜接收到所述任一像素在所述显示设备未发生形变时发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内。
显示设备在形变前,每个像素都会有着对应的透镜,并在未发生形变时,像素发射的像素光线通过对应的透镜后,生成的显示光线在所述显示设备的可视角度范围内,并以此生成最终显示设备显示出的三维模型。因此,可以设置设定透镜为与该任一像素相对应的透镜。
其中,显示设备发生形变前,像素与透镜的对应关系可以设置为:像素中心与透镜中心的距离小于预设距离的像素,作为与该透镜对应的像素,预设距离可以为透镜的半径,也可以为其他人为设置的距离,本实施例对此不作具体限制。
显示设备发生形变后,若判断目标透镜不是该任一像素的设定透镜(即对应透镜),则认为该像素在显示设备发生形变的过程中也发生了形变,就需要对该像素的显示内容做出相应的调整。当确定了在显示设备形变后该像素的目标透镜,即可以根据目标透镜对应的显示内容对该像素的显示内容进行调整,以使得对显示设备最终显示的三维模型进行调整。
本发明提供的一种基于柔性裸眼三维显示设备的显示处理方法,通过对显示设备中的任一像素,从接收到所述任一像素当前发射的像素光线的透镜中确定目标透镜;若所述目标透镜不是所述任一像素对应的设定透镜,则根据所述目标透镜对应的显示内容调整所述任一像素的显示内容;实现了在柔性裸眼三维显示设备发生形变时,及时对显示设备中发生形变部分的像素的显示内容进行调整,实现对显示设备生成的光场的优化,消除了由显示设备的形变导致的最终显示出的三维模型的畸变,优化了三维模型的显示效果,提高了用户的观看体验。
在上述实施例的基础上,根据本发明提供的一种基于柔性裸眼三维显示设备的显示处理方法,还包括:
若所述显示设备中不存在所述目标透镜,则控制所述任一像素停止发射所述像素光线。
所述显示设备中不存在目标透镜,即任一像素发射的像素光线,在经过接收到该像素光线的透镜生成的显示光线,都不在显示设备的可视角度范围内,则认为该像素产生的光线无法对显示三维模型产生有益的效果,甚至会影响三维模型的正常显示,此时可以控制该像素停止发射像素光线。
具体的,可以在显示设备生成的光场中,将该像素对应的显示光线的向量置零,防止该显示光线对显示出的三维模型造成影响。
本实施例中,当显示设备中不存在目标透镜时,通过控制像素停止发射像素光线,可以防止该像素产生的光线对显示出的三维模型造成影响,优化了三维模型的显示效果,降低了显示设备的能耗。
在上述实施例的基础上,根据本发明提供的一种基于柔性裸眼三维显示设备的显示处理方法,所述从接收到所述任一像素当前发射的像素光线的透镜中确定目标透镜,包括:
循环执行目标透镜确定步骤,直到当前待定透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内,将当前待定透镜作为所述目标透镜;
其中,所述目标透镜确定步骤包括:
从接收到所述任一像素当前发射的像素光线的透镜中,获取任一未遍历到的透镜作为当前待定透镜,判断当前待定透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线是否在所述显示设备的可视角度范围内。
图4为本发明另一实施例提供的像素光线更新示意图。在显示设备发生形变后,会有多个接收到任一像素发射的像素光线的透镜,对这些透镜依次执行目标透镜确定步骤,即对一个透镜执行完目标透镜确定步骤后,若确认该透镜在接收到像素光线后生成的显示光线不在可视角度范围内,则对另一个接收待该像素光线的透镜进行确定,直到确定出目标透镜为止;进一步地,若对所有的透镜都执行了目标透镜确定步骤后,不存在目标透镜,则控制所述任一像素停止发射所述像素光线。
本实施例中,通过对接收到像素光线的透镜循环执行目标透镜确认步骤,可以最大程度的确定出像素的目标透镜,使得像素对应的显示光线尽量在可视角度范围内,从而增加显示设备中参与生成三维模型的像素数量,同时增加了光场中的光线数量,提高三维模型的分辨率。
在上述实施例的基础上,根据本发明提供的一种基于柔性裸眼三维显示设备的显示处理方法,所述判断当前待定透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线是否在所述显示设备的可视角度范围内,包括:
根据所述任一像素的中心坐标与所述当前待定透镜的中心坐标,获取用于表示所述当前待定透镜生成的显示光线的空间坐标;
根据所述空间坐标,计算所述当前待定透镜生成的显示光线相对于第一平面的倾角;其中,所述第一平面为所述显示设备未发生形变时所述当前待定透镜所在平面;
若所述倾角在所述可视角度范围内,则确定所述当前待定透镜生成的显示光线在所述显示设备的可视角度范围内。
图5为本发明另一实施例提供的基于柔性裸眼三维显示设备建立的三维坐标系示意图。参见图5,在显示设备发生形变前,建立三维坐标系;其中,以发生形变前的透镜所在的平面作为三维坐标系中的X-Y坐标轴平面,在显示设备中心建立三维坐标系;在三维坐标系中,获得了一条直线的空间坐标后,就可以获得该直线相对于发生形变前的透镜所在的平面的倾角。
在显示设备发生形变后,在三维坐标系中,可以获取到所述任一像素的中心坐标及当前待定透镜的中心坐标,根据两个中心坐标可以确定用于表示该像素对应的显示光线的空间坐标,根据该空间坐标计算得到该显示光线相对于第一平面的倾角(包括相对于X坐标轴的倾角及相对于Y坐标轴的倾角),通过倾角判断该显示光线是否在可视角度范围内。
其中,显示设备的可视角度范围可以通过显示设备的参数进行计算和调整。
具体的,计算显示屏上每个像素对应的显示光线,利用像素中心和透镜中心位置来表示显示光线;在以微透镜为光线调制元件的显示设备中,显示光线记为(u’,v’,w’,r’,s’,t’);在柱透镜为光线调制元件的显示设备中,使用的柱透镜只支持一个方向的形变,显示光线可以记为(u’,v’,w’,r’,v’,t’);其中,前三位坐标参数表示像素中心的坐标位置,后三位坐标参数表示透镜中心的坐标位置。
本实施例中,通过在三维坐标系中计算显示光线相对与第一平面的倾角,判断该显示光线是否在可视角度范围内,从而确定任一像素的目标透镜;以空间坐标的方法计算显示光线的倾角,可以更加直观准确的判断显示光线是否在可视角度范围内,提高目标透镜确认的准确性。
在上述实施例的基础上,根据本发明提供的一种基于柔性裸眼三维显示设备的显示处理方法,所述根据所述空间坐标,计算所述当前待定透镜生成的显示光线相对于第一平面的倾角,包括:
根据所述空间坐标,确定所述当前待定透镜生成的显示光线所在的直线与所述第一平面的第一交点坐标、所述当前待定透镜生成的显示光线所在的直线与第二平面的第二交点坐标;其中,所述第二平面为所述显示设备未发生形变时所述任一显示像素所在平面;
通过所述第一交点坐标和所述第二交点坐标,计算所述当前待定透镜生成的显示光线的发射倾角。
在三维坐标系中,每条显示光线的坐标都包含着像素中心和透镜中心的三维坐标(即6个坐标参数),记录比较复杂,得到倾角的计算量也较大,因此需要对显示光线的空间坐标进行简化。
在显示设备发生形变前,以当前待定透镜所在的平面为第一平面,显示像素所在的平面为第二平面,将显示光线所在的直线分别与第一平面、第二平面相交,得到第一交点坐标和第二交点坐标,将这两个交点坐标作为简化后的显示光线的空间坐标,即实现了对显示光线的空间坐标的简化。
图6为本发明另一实施例提供的表示显示光线的空间坐标简化方法示意图。参见图6,具体的,在微透镜为光线调制元件的显示设备中,表示显示光线的空间坐标为(u’,v’,w’,r’,s’,t’),其中,前三位数表示像素中心的坐标位置,后三位数表示透镜中心的坐标位置。然后简化显示光场的表达,将形变后的显示光场通过原显示屏平面(即显示像素所在平面)和透镜平面(即当前待定透镜所在平面)中的点来进行记录。将光线反向投影到原来的显示器平面和透镜阵列平面中,可以将结果简化为(u,v,s,t),其中,前两位坐标参数表示显示像素所在的平面(即第二平面)上与显示光线所在的直线交汇的位置坐标,后两位坐标参数表示透镜阵列平面(即第一平面)与光线交汇的位置坐标。
在柱透镜为光线调制元件的显示设备中,表示显示光线的空间坐标为(u’,v’,w’,r’,v’,t’),简化后的空间坐标为(u,v,s,v),即对于柱透镜为光线调制元件的显示设备中,表示显示光线的空间坐标可以只包含3个坐标参数。
进一步地,在柔性裸眼三维显示设备中,为获得良好的三维显示效果,设定一个固定的视区范围(即可视角度范围)以保证形变后裸眼三维显示的显示光场都在这个视区范围内。
基本的视区范围的定义如下所示:假设裸眼三维显示采用的微透镜阵列间距为Plens,微透镜阵列和显示屏之间的间距为G,在显示设备未发生形变的三维坐标系下,视区内的视角为[-θviewview],其中
Figure BDA0002943925560000131
该视角范围是X轴和Y轴的视角范围,即当显示光线同时在两个轴方向上的倾角在[-θviewview]区间内时,显示光线得到保留。
判断显示光线的倾角是否在可视角度范围内的过程如下:
遍历所有像素对应的显示光线,计算其中任一显示光线的发射倾角(θlightxlighty)。对任意像素对应光线(Ui,Vi,Si,Ti),其发射倾角分别为:
Figure BDA0002943925560000141
将计算得到的光线发射倾角(θlightxlighty)与视区范围[-θviewview]进行比较。
当一个透镜接收到像素发出的像素光线后,生成的显示光线的倾角超出视区范围时,计算该透镜相邻的另一个透镜接收到像素光线后生成的显示光线(Ui,Vi,Sk,Tk)的倾角是否超出视区范围,如果在视区范围内则更新光线(即调整该像素的显示内容);若没有透镜在接收到像素光线后生成的显示光线的倾角在视区范围内,则将该显示光线的向量置零(即控制该像素停止发射所述像素光线)。
本实施例中,通过对表示显示光线的空间坐标的简化,减少了显示设备在发生形变、调整像素的显示内容时的数据量,使得在计算显示光线的倾角时更加迅速,可以在更短的时间内完成对于显示设备显示的三维模型的调整,使得显示出的三维模型画面更加流畅,提高了用户的观看体验。
在上述实施例的基础上,根据本发明提供的一种基于柔性裸眼三维显示设备的显示处理方法,所述根据所述目标透镜对应的显示内容调整所述任一像素的显示内容,包括:
在通过所述显示设备显示的三维模型中,确定通过所述目标透镜显示的三维模型单元;
将用于显示所述三维模型单元的像素内容,作为所述任一像素的显示内容。
在显示设备显示三维模型的过程中,会将若干个透镜作为一个显示单元,通过给予该显示单元分配相应的三维模型单元,使得整个显示设备中的不同显示单元显示出不同的内容,从而在整体上构建出三维模型。
在确定了像素的目标透镜后,根据目标透镜需要显示的三维模型单元,确定该像素需要显示的内容,以此对该像素的显示内容进行调整。
本实施例中,根据目标透镜显示的三维模型单元,对像素的显示内容进行调整,使得该像素可以显示目标透镜的内容,由此在显示设备发生形变后,也能使得像素显示正确的显示内容,实现了对显示设备生成的光场的优化,同时优化了三维模型的显示效果,提高了用户的观看体验。
在上述实施例的基础上,根据本发明提供的一种基于柔性裸眼三维显示设备的显示处理方法,在根据所述目标透镜对应的显示内容调整所述任一像素的显示内容之后,还包括:
获取在对所述显示设备的每一像素的显示内容进行调整后得到的光场,作为优化后光场;
根据所述优化后光场,优化通过所述显示设备显示的三维模型。
光场为显示设备中每个像素发射的光线对应的空间坐标的集合,对光场进行渲染,可以生成通过显示设备显示的三维模型。若显示设备发生了形变,则相应的,像素显示的光线的方向也会发生形变,光场同时发生了变化。
显示设备发生形变后,对像素的显示内容进行调整,可以使得像素对应的显示光线在显示设备的可视角度范围内,从而对光场进行优化,进而优化通过显示设备显示的三维模型。
具体的,对于形变显示屏(即显示设备)的二维显示内容,采用CUDA(ComputeUnified Device Architecture,统一计算设备架构)加速并行计算的方式对每个显示屏像素点并行计算场景中光线跟踪的结果,从而加快渲染速度。
在初始化过程中,将所有数据置于三维空间包围盒[-1,1]的范围内,且数据中心与坐标系原点重合。对于显示屏上像素序号为(i,j)的像素点,根据形变显示屏的重建结果,计算其对应的透镜位于透镜阵列中的归一化坐标(lx,ly),以及所处当前基元图像中的位置从而计算其对应的视点序号MultiViewt。根据上述参数,定义多视点沿虚拟场景内中心视点成像面的横轴等距排列,根据当前像素对应的视点序号MultiViewt,可以计算出对应视点相机所处位置Camt,同时使成像面垂直于相机到原点的向量,从而保证物体成像在当前视点图像的中心;根据当前像素对应透镜的坐标(lx,ly),映射至当前视点图的成像面范围内,即可得到当前二维显示器的像素点(i,j)在虚拟场景中的三维坐标VirtualPixeli,j,因此当前像素点的光线起始坐标为RayO=Camt,方向为RayD=VirtualPixeli,j-Camt
根据得到的光线参数,将光线与虚拟场景内的物体相互作用得到当前像素的最终颜色值。由于三维模型包含体数据和面数据两种格式,分别采用体绘制和主光线求交的面绘制方式进行渲染。在面绘制阶段,将当前光线与初始化中采用树状结构描述后的面数据进行求交运算,将所有相交面片的光线深度值与面片信息保存。在体绘制阶段,设定光线采样的步长Step,沿着光线方向采集N个数据点,第i个数据点的空间位置为RayO+Step×i×RayD,采样点的颜色值通过原始数据数值和预定义的传递函数决定。在混合当前光线颜色的过程中,按从前到后的顺序混合体数据采样点,并将相交面片按正确深度插入一同混合。
本实施例中,通过调整像素的显示内容,对显示设备生成的光场进行调整和优化,消除了由显示设备的形变导致的最终显示出的三维模型的畸变,优化了三维模型的显示效果。
以下对本发明另一实施例提出的一种针对基于柔性裸眼三维显示设备的显示处理方法进行具体说明。
图7为本发明另一实施例提供的针对裸眼三维显示的柔性可形变三维显示系统及方法的流程示意图。参见图7,该显示方法包括:
步骤701:选择一种裸眼三维显示装置,用柔性器件代替原有显示器中的硬性器件;
步骤702:对显示器平面建模,通过透镜标定或参数匹配的方式计算形变后的显示光场;
步骤703:根据视区参数优化显示光场;
步骤704:基于形变显示光场重新渲染需要显示的三维模型。
具体的,对于步骤701,选择一种裸眼三维显示装置,用柔性器件代替原有显示器中的硬性器件,利用光学传感器或力学传感器获取三维显示器平面形变模型或参数。
首先,以裸眼三维显示装置为基础,用柔性器件代替原有显示器中的刚性器件。对于投影式的三维显示,采用柔性背投屏代替原本的背投屏幕。对于采用平面显示器的三维显示设备,采用柔性屏代替硬性屏幕。对柱透镜阵列或微透镜阵列,以柔性塑料材质为基底代替玻璃或硬性塑料材质,并在柱透镜或微透镜排列时留出一定的空隙以适应整个器件的变形。透镜仍使用硬性塑料或玻璃,以防止透镜变形带来的透镜参数变化。当使用柱透镜时,只支持一个方向的形变。对光栅调制元件,可以采用柔性材料制造光栅。由此,可以令裸眼三维显示器中所用的元件都具有一定的变形能力。
用光学传感器获取三维显示器的形变模型。整个设备包括一个柔性三维显示器和一个光学传感器。其中,柔性三维显示器包括一个柔性屏幕提供基本的图像源,一个柔性光学隔板用于配对透镜和基元图像以防止像素串扰,一个柔性柱透镜阵列或微透镜阵列。特别的,可以用深度相机或双目相机获取所用三维显示器发生形变当前时刻的三维点云数据,获取到的数据经过处理剔除背景后用于下一步操作。
图8为本发明另一实施例提供的使用投影装置代替柔性显示器得显示装置示意图。参见图8,用一个柔性背投屏代替柔性屏幕,在屏幕后用一个投影仪向屏幕投影。
图9为本发明另一实施例提供的使用力学传感器获取三维显示器的形变模型的示意图。参见图9,整个设备包括一个柔性三维显示器和一个力学传感器。柔性三维显示器的结构和前述的结构类似。力学传感器直接集成在柔性三维显示器背后,作为第四层覆盖在柔性屏幕之后。该力学传感器由横向和纵向的多个柔性金属片构成,其中,柔性金属片在形变过程中电阻值发生相应的改变,传感器主体通过测量各金属片两端的电阻值推算每条金属片所在直线对应的形变曲率。
对于步骤702,对显示器平面建模,通过透镜标定或参数匹配的方式计算形变后的显示光场。
图10为本发明另一实施例提供的根据建模的柔性可形变三维显示设备计算显示光场的流程图。参见图10,具体的,对于用光学传感器获取三维显示器的形变模型,通过透镜标定的方法计算形变后的三维显示器模型。首先通过深度相机,采集到形变后三维显示器的空间形状。接下来通过深度相机中的彩色相机对透镜中心位置进行标定。在显示器上显示一个全白图像,微型透镜的中心从全白图案提取。由于透镜中心与其边界具有不同的光强度,采用多阈值方法可以用于透镜中心的提取,并通过区域面积和圆形度的阈值将采集到的三维显示器上的白色分布分类为透镜区域和非透镜区域。并计算符合条件的圆形亮斑区域中心记为透镜中心。
在实际标定中,由于透镜眩光或显示屏像素间距过大,可能导致透镜中心提取失败。假定透镜是均匀分布在柔性面板上,根据相邻透镜中心估计丢失透镜中心的位置,丢失的透镜可以采用基于Delaunay三角测量的互补和索引步骤补全。
进一步地,可以通过设置多个相机更加精细地标定相机-透镜中心-屏幕像素之间的关系,从而补偿三维显示器形变后造成的透镜的微小旋转和移位。
对图9所描述的使用力学传感器获取三维显示器的形变模型实例,通过参数匹配的方法计算形变后的三维显示器模型。在步骤701中,获得了平面中已知间隔的若干条直线对应的曲率,通过双线性差值的方法获得整个平面的曲率图,然后利用曲率图计算对应的三维显示器形变模型。
已知三维显示器形变模型,可以进一步计算其形变后的显示光场,计算方法如下所述:在上述过程中,已经获得显示器平面和透镜平面的空间形变信息。在形变前,显示器和透镜阵列都是一个平面,在显示器中心位置建立三维坐标系(参见图5),并记录透镜中心和显示器像素的对应关系。
图11为本发明另一实施例提供的透镜与像素对应关系示意图。参见图11,可以设定在透镜中心距离半个透镜间距以内的像素为该透镜的对应像素。并且假定在形变后,维持透镜中心和显示器像素的对应关系不变。
然后,在显示设备形变后计算显示光场。根据形变信息计算显示屏上每个像素对应的显示光线,利用像素中心和透镜中心位置来表示光线,记为(u’,v’,w’,r’,s’,t’)。其中,前三位数表示像素中心的坐标位置,后三位数表示透镜中心的坐标位置。然后简化显示光场的表达,将形变后的显示光场通过原显示屏平面和透镜平面中的点来进行记录。将光线反向投影到原来的显示器平面和透镜阵列平面中,可以将结果简化为(u,v,s,t)。其中,前两位数字表示显示器平面上与光线交汇的位置,后两位数表示透镜阵列平面与光线交汇的位置。显示光场表达了显示器在形变后每个像素发射的光线对应的空间坐标。通过显示光场的计算可以在渲染中正确地复原虚拟图像的光线信息。
当用于光线调制的元件为柱透镜阵列时,此时光场的形变只有一个维度。显示光场可以通过如下方法进行计算。首先维持柱透镜和显示器像素的对应关系不变,根据形变信息计算显示屏上每个像素对应的显示光线,利用像素中心和透镜中心位置来表示光线,记为(u’,v’,w’,r’,v’,t’)。其中,前三位数表示像素中心的坐标位置,后三位数表示光线经过柱透镜的坐标位置。然后简化显示光场的表达,将形变后的显示光场通过原显示屏平面和透镜平面中的点来进行记录。将光线反向投影到原来的显示器平面和透镜阵列平面中,可以将结果简化为(u,v,s,v)。其中,前两位数字表示显示器平面上与光线交汇的位置,后两位数表示透镜阵列平面与光线交汇的位置。对柱透镜显示,显示光场可以用3个参数进行表示。
对于步骤703,具体的,当一个透镜接收到像素发出的像素光线后,生成的显示光线的倾角超出视区范围时,计算该透镜相邻的另一个透镜接收到像素光线后生成的显示光线(Ui,Vi,Sk,Tk)的倾角是否超出视区范围,如果在视区范围内则更新光线(即调整该像素的显示内容);若没有透镜在接收到像素光线后生成的显示光线的倾角在视区范围内,则将该显示光线的向量置零(即控制该像素停止发射所述像素光线)。
对于步骤704,具体的,显示设备发生形变后,对像素的显示内容进行调整,可以使得像素对应的显示光线在显示设备的可视角度范围内,从而对光场进行优化,进而优化通过显示设备显示的三维模型。
因此,本发明实施例提供了一种柔性可形变裸眼三维显示系统及方法,其中该系统包括:柔性裸眼立体显示模块,采用柔性显示屏及柔性透镜阵列,或者采用柔性背投屏及投影仪,提供三维光场并允许显示器发生合理范围内的形变;显示器形变检测模块,采用光学传感器或力学传感器,检测显示器的形变量;光场计算与图像渲染模块,根据显示器形变结果渲染三维图像。同时,本发明实施例也提出了一种基于三维显示器形变检测的三维显示渲染方法,使得形变后的三维显示器能够显示不形变的三维影像。
进一步的,本发明实施例的目的在于提出一种柔性可形变的裸眼三维显示器。
为实现上述目的,本申请提出柔性可形变的裸眼三维显示方法及系统。本申请用柔性二维显示屏代替原本裸眼三维显示中固定形状的平面二维显示屏,并结合可弯曲的光栅器件,实现可形变的三维显示器。与传统裸眼三维显示不同,显示柔性可形变的显示屏和光栅意味着在显示器对应的显示光场不再固定,缺少必要的约束。针对变化的显示光场,本发明另一实施例提出一种基于三维显示器形变检测的显示光场计算和优化方法,使得柔性三维显示器在形变后能够显示正确的三维影像。
本发明实施例提出的一种柔性可形变裸眼三维显示系统及方法,有利于推动裸眼三维显示在可穿戴式设备和便携式智能终端中的应用。
图12为本发明实施例提供的基于柔性裸眼三维显示设备的显示处理装置的结构示意图。参见图12,该基于柔性裸眼三维显示设备的显示处理装置包括:
确定模块1201,用于对显示设备中的任一像素,从接收到所述任一像素当前发射的像素光线的透镜中确定目标透镜;其中,所述目标透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内;
调整模块1202,用于若所述目标透镜不是所述任一像素对应的设定透镜,则根据所述目标透镜对应的显示内容调整所述任一像素的显示内容;其中,所述设定透镜接收到所述任一像素在所述显示设备未发生形变时发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内。
本实施例提供的基于柔性裸眼三维显示设备的显示处理装置适用于上述各实施例提供的基于柔性裸眼三维显示设备的显示处理方法,在此不再赘述。
本发明提供的一种基于柔性裸眼三维显示设备的显示处理装置,通过对显示设备中的任一像素,从接收到所述任一像素当前发射的像素光线的透镜中确定目标透镜;若所述目标透镜不是所述任一像素对应的设定透镜,则根据所述目标透镜对应的显示内容调整所述任一像素的显示内容;实现了在柔性裸眼三维显示设备发生形变时,及时对显示设备中发生形变部分的像素的显示内容进行调整,实现对显示设备生成的光场的优化,消除了由显示设备的形变导致的最终显示出的三维模型的畸变,优化了三维模型的显示效果,提高了用户的观看体验。
进一步的,根据本发明提供的一种基于柔性裸眼三维显示设备的显示处理方法,还包括:
若所述显示设备中不存在所述目标透镜,则控制所述任一像素停止发射所述像素光线。
进一步的,根据本发明提供的一种基于柔性裸眼三维显示设备的显示处理方法,所述从接收到所述任一像素当前发射的像素光线的透镜中确定目标透镜,包括:
循环执行目标透镜确定步骤,直到当前待定透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内,将当前待定透镜作为所述目标透镜;
其中,所述目标透镜确定步骤包括:
从接收到所述任一像素当前发射的像素光线的透镜中,获取任一未遍历到的透镜作为当前待定透镜,判断当前待定透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线是否在所述显示设备的可视角度范围内。
进一步的,根据本发明提供的一种基于柔性裸眼三维显示设备的显示处理方法,所述判断当前待定透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线是否在所述显示设备的可视角度范围内,包括:
根据所述任一像素的中心坐标与所述当前待定透镜的中心坐标,获取用于表示所述当前待定透镜生成的显示光线的空间坐标;
根据所述空间坐标,计算所述当前待定透镜生成的显示光线相对于第一平面的倾角;其中,所述第一平面为所述显示设备未发生形变时所述当前待定透镜所在平面;
若所述倾角在所述可视角度范围内,则确定所述当前待定透镜生成的显示光线在所述显示设备的可视角度范围内。
进一步的,根据本发明提供的一种基于柔性裸眼三维显示设备的显示处理方法,所述根据所述空间坐标,计算所述当前待定透镜生成的显示光线相对于第一平面的倾角,包括:
根据所述空间坐标,确定所述当前待定透镜生成的显示光线所在的直线与所述第一平面的第一交点坐标、所述当前待定透镜生成的显示光线所在的直线与第二平面的第二交点坐标;其中,所述第二平面为所述显示设备未发生形变时所述任一显示像素所在平面;
通过所述第一交点坐标和所述第二交点坐标,计算所述当前待定透镜生成的显示光线的发射倾角。
进一步的,根据本发明提供的一种基于柔性裸眼三维显示设备的显示处理方法,所述根据所述目标透镜对应的显示内容调整所述任一像素的显示内容,包括:
在通过所述显示设备显示的三维模型中,确定通过所述目标透镜显示的三维模型单元;
将用于显示所述三维模型单元的像素内容,作为所述任一像素的显示内容。
进一步的,根据本发明提供的一种基于柔性裸眼三维显示设备的显示处理方法,在根据所述目标透镜对应的显示内容调整所述任一像素的显示内容之后,还包括:
获取在对所述显示设备的每一像素的显示内容进行调整后得到的光场,作为优化后光场;
根据所述优化后光场,优化通过所述显示设备显示的三维模型。
图13示例了一种电子设备的实体结构示意图,如图13所示,该电子设备可以包括:处理器(processor)1310、通信接口(Communications Interface)1320、存储器(memory)1330和通信总线1340,其中,处理器1310,通信接口1320,存储器1330通过通信总线1340完成相互间的通信。处理器1310可以调用存储器1330中的逻辑指令,以执行基于柔性裸眼三维显示设备的显示处理方法,该方法包括:对显示设备中的任一像素,从接收到所述任一像素当前发射的像素光线的透镜中确定目标透镜;其中,所述目标透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内;若所述目标透镜不是所述任一像素对应的设定透镜,则根据所述目标透镜对应的显示内容调整所述任一像素的显示内容;其中,所述设定透镜接收到所述任一像素在所述显示设备未发生形变时发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内。
此外,上述的存储器1330中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
另一方面,本发明还提供一种计算机程序产品,所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序,所述计算机程序包括程序指令,当所述程序指令被计算机执行时,计算机能够执行上述各方法所提供的基于柔性裸眼三维显示设备的显示处理方法,该方法包括:对显示设备中的任一像素,从接收到所述任一像素当前发射的像素光线的透镜中确定目标透镜;其中,所述目标透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内;若所述目标透镜不是所述任一像素对应的设定透镜,则根据所述目标透镜对应的显示内容调整所述任一像素的显示内容;其中,所述设定透镜接收到所述任一像素在所述显示设备未发生形变时发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内。
又一方面,本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现以执行上述各提供的基于柔性裸眼三维显示设备的显示处理方法,该方法包括:对显示设备中的任一像素,从接收到所述任一像素当前发射的像素光线的透镜中确定目标透镜;其中,所述目标透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内;若所述目标透镜不是所述任一像素对应的设定透镜,则根据所述目标透镜对应的显示内容调整所述任一像素的显示内容;其中,所述设定透镜接收到所述任一像素在所述显示设备未发生形变时发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种基于柔性裸眼三维显示设备的显示处理方法,其特征在于,包括:
对显示设备中的任一像素,从接收到所述任一像素当前发射的像素光线的透镜中确定目标透镜;其中,所述目标透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内;
若所述目标透镜不是所述任一像素对应的设定透镜,则根据所述目标透镜对应的显示内容调整所述任一像素的显示内容;其中,所述设定透镜接收到所述任一像素在所述显示设备未发生形变时发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内。
2.根据权利要求1所述的一种基于柔性裸眼三维显示设备的显示处理方法,其特征在于,还包括:
若所述显示设备中不存在所述目标透镜,则控制所述任一像素停止发射所述像素光线。
3.根据权利要求1所述的一种基于柔性裸眼三维显示设备的显示处理方法,其特征在于,所述从接收到所述任一像素当前发射的像素光线的透镜中确定目标透镜,包括:
循环执行目标透镜确定步骤,直到当前待定透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内,将当前待定透镜作为所述目标透镜;
其中,所述目标透镜确定步骤包括:
从接收到所述任一像素当前发射的像素光线的透镜中,获取任一未遍历到的透镜作为当前待定透镜,判断当前待定透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线是否在所述显示设备的可视角度范围内。
4.根据权利要求3所述的一种基于柔性裸眼三维显示设备的显示处理方法,其特征在于,所述判断当前待定透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线是否在所述显示设备的可视角度范围内,包括:
根据所述任一像素的中心坐标与所述当前待定透镜的中心坐标,获取用于表示所述当前待定透镜生成的显示光线的空间坐标;
根据所述空间坐标,计算所述当前待定透镜生成的显示光线相对于第一平面的倾角;其中,所述第一平面为所述显示设备未发生形变时所述当前待定透镜所在平面;
若所述倾角在所述可视角度范围内,则确定所述当前待定透镜生成的显示光线在所述显示设备的可视角度范围内。
5.根据权利要求4所述的一种基于柔性裸眼三维显示设备的显示处理方法,其特征在于,所述根据所述空间坐标,计算所述当前待定透镜生成的显示光线相对于第一平面的倾角,包括:
根据所述空间坐标,确定所述当前待定透镜生成的显示光线所在的直线与所述第一平面的第一交点坐标、所述当前待定透镜生成的显示光线所在的直线与第二平面的第二交点坐标;其中,所述第二平面为所述显示设备未发生形变时所述任一显示像素所在平面;
通过所述第一交点坐标和所述第二交点坐标,计算所述当前待定透镜生成的显示光线的发射倾角。
6.根据权利要求1所述的一种基于柔性裸眼三维显示设备的显示处理方法,其特征在于,所述根据所述目标透镜对应的显示内容调整所述任一像素的显示内容,包括:
在通过所述显示设备显示的三维模型中,根据所述像素光线确定通过所述目标透镜显示的三维模型单元;
将用于显示所述三维模型单元的像素内容,作为所述任一像素的显示内容。
7.根据权利要求1所述的一种基于柔性裸眼三维显示设备的显示处理方法,其特征在于,在根据所述目标透镜对应的显示内容调整所述任一像素的显示内容之后,还包括:
获取在对所述显示设备的每一像素的显示内容进行调整后得到的光场,作为优化后光场;
根据所述优化后光场,优化通过所述显示设备显示的三维模型。
8.一种基于柔性裸眼三维显示设备的显示处理装置,其特征在于,包括:
确定模块,用于对显示设备中的任一像素,从接收到所述任一像素当前发射的像素光线的透镜中确定目标透镜;其中,所述目标透镜接收到所述任一像素当前发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内;
调整模块,用于若所述目标透镜不是所述任一像素对应的设定透镜,则根据所述目标透镜对应的显示内容调整所述任一像素的显示内容;其中,所述设定透镜接收到所述任一像素在所述显示设备未发生形变时发射的像素光线后,生成的显示光线在所述显示设备的可视角度范围内。
9.一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1至7任一项所述基于柔性裸眼三维显示设备的显示处理方法的步骤。
10.一种非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述基于柔性裸眼三维显示设备的显示处理方法的步骤。
CN202110190457.3A 2021-02-18 2021-02-18 基于柔性裸眼三维显示设备的显示处理方法及其装置 Active CN114967170B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110190457.3A CN114967170B (zh) 2021-02-18 2021-02-18 基于柔性裸眼三维显示设备的显示处理方法及其装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110190457.3A CN114967170B (zh) 2021-02-18 2021-02-18 基于柔性裸眼三维显示设备的显示处理方法及其装置

Publications (2)

Publication Number Publication Date
CN114967170A true CN114967170A (zh) 2022-08-30
CN114967170B CN114967170B (zh) 2023-07-18

Family

ID=82954326

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110190457.3A Active CN114967170B (zh) 2021-02-18 2021-02-18 基于柔性裸眼三维显示设备的显示处理方法及其装置

Country Status (1)

Country Link
CN (1) CN114967170B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115776560A (zh) * 2022-12-05 2023-03-10 杭州思影奇数字科技有限公司 基于裸眼3d技术的图像拼接修复处理系统及其方法

Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0777668A (ja) * 1993-09-09 1995-03-20 Sony Corp 画像出力方法
CN101460879A (zh) * 2006-06-06 2009-06-17 卢森特技术有限公司 光波前构造
CN102096200A (zh) * 2010-12-23 2011-06-15 深圳超多维光电子有限公司 一种立体显示装置及其透镜阵列
CN102376207A (zh) * 2011-10-31 2012-03-14 清华大学深圳研究生院 Led立体显示屏及制作方法、显示系统和显示方法
CN102378024A (zh) * 2010-08-11 2012-03-14 索尼公司 图像处理器、立体显示器和显示系统、检测和制造方法
CN103018996A (zh) * 2012-11-27 2013-04-03 京东方科技集团股份有限公司 一种3d显示装置及其驱动方法
CN103945208A (zh) * 2014-04-24 2014-07-23 西安交通大学 一种针对多视点裸眼3d显示的并行同步缩放引擎及方法
CN104702936A (zh) * 2015-03-31 2015-06-10 王子强 一种基于裸眼3d显示的虚拟现实交互方法
CN105446050A (zh) * 2016-01-08 2016-03-30 京东方科技集团股份有限公司 3d显示控制系统及方法
CN105527719A (zh) * 2016-01-26 2016-04-27 广西粤桂高科电子有限公司 裸眼3d显示器及其显示方法
US20170171538A1 (en) * 2015-12-10 2017-06-15 Cynthia S. Bell Ar display with adjustable stereo overlap zone
CN107018402A (zh) * 2016-01-27 2017-08-04 北京三星通信技术研究有限公司 裸眼三维显示器的图像误差修正方法及装置
CN107801019A (zh) * 2017-10-31 2018-03-13 江苏中升立体显示科技有限公司 一种基于柱镜光栅的多视点裸眼3d显示区域补偿方法
CN108174184A (zh) * 2013-09-04 2018-06-15 北京三星通信技术研究有限公司 快速集成图像生成方法及与用户交互的裸眼三维显示系统
WO2018200417A1 (en) * 2017-04-24 2018-11-01 Pcms Holdings, Inc. Systems and methods for 3d displays with flexible optical layers

Patent Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0777668A (ja) * 1993-09-09 1995-03-20 Sony Corp 画像出力方法
CN101460879A (zh) * 2006-06-06 2009-06-17 卢森特技术有限公司 光波前构造
CN102378024A (zh) * 2010-08-11 2012-03-14 索尼公司 图像处理器、立体显示器和显示系统、检测和制造方法
CN102096200A (zh) * 2010-12-23 2011-06-15 深圳超多维光电子有限公司 一种立体显示装置及其透镜阵列
CN102376207A (zh) * 2011-10-31 2012-03-14 清华大学深圳研究生院 Led立体显示屏及制作方法、显示系统和显示方法
CN103018996A (zh) * 2012-11-27 2013-04-03 京东方科技集团股份有限公司 一种3d显示装置及其驱动方法
CN108174184A (zh) * 2013-09-04 2018-06-15 北京三星通信技术研究有限公司 快速集成图像生成方法及与用户交互的裸眼三维显示系统
CN103945208A (zh) * 2014-04-24 2014-07-23 西安交通大学 一种针对多视点裸眼3d显示的并行同步缩放引擎及方法
CN104702936A (zh) * 2015-03-31 2015-06-10 王子强 一种基于裸眼3d显示的虚拟现实交互方法
US20170171538A1 (en) * 2015-12-10 2017-06-15 Cynthia S. Bell Ar display with adjustable stereo overlap zone
CN105446050A (zh) * 2016-01-08 2016-03-30 京东方科技集团股份有限公司 3d显示控制系统及方法
CN105527719A (zh) * 2016-01-26 2016-04-27 广西粤桂高科电子有限公司 裸眼3d显示器及其显示方法
CN107018402A (zh) * 2016-01-27 2017-08-04 北京三星通信技术研究有限公司 裸眼三维显示器的图像误差修正方法及装置
WO2018200417A1 (en) * 2017-04-24 2018-11-01 Pcms Holdings, Inc. Systems and methods for 3d displays with flexible optical layers
CN107801019A (zh) * 2017-10-31 2018-03-13 江苏中升立体显示科技有限公司 一种基于柱镜光栅的多视点裸眼3d显示区域补偿方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115776560A (zh) * 2022-12-05 2023-03-10 杭州思影奇数字科技有限公司 基于裸眼3d技术的图像拼接修复处理系统及其方法
CN115776560B (zh) * 2022-12-05 2023-08-22 杭州思影奇数字科技有限公司 基于裸眼3d技术的图像拼接修复处理系统及其方法

Also Published As

Publication number Publication date
CN114967170B (zh) 2023-07-18

Similar Documents

Publication Publication Date Title
US9357206B2 (en) Systems and methods for alignment, calibration and rendering for an angular slice true-3D display
JP4764305B2 (ja) 立体画像生成装置、方法およびプログラム
US8189035B2 (en) Method and apparatus for rendering virtual see-through scenes on single or tiled displays
KR101675961B1 (ko) 적응적 부화소 렌더링 장치 및 방법
JP5366547B2 (ja) 立体視表示装置
EP3350989B1 (en) 3d display apparatus and control method thereof
US10560683B2 (en) System, method and software for producing three-dimensional images that appear to project forward of or vertically above a display medium using a virtual 3D model made from the simultaneous localization and depth-mapping of the physical features of real objects
EP1074943A2 (en) Image processing method and apparatus
AU2018249563B2 (en) System, method and software for producing virtual three dimensional images that appear to project forward of or above an electronic display
KR20040071124A (ko) 스테레오 및 멀티 애스펙트 이미지들의 비주얼화를 위한시스템 및 방법
CN108881893A (zh) 基于人眼跟踪的裸眼3d显示方法、装置、设备和介质
WO2012140397A2 (en) Three-dimensional display system
CN109782452B (zh) 立体影像产生方法、成像方法与系统
CN110536128B (zh) 显示设备
KR20170025214A (ko) 다시점 깊이맵 생성 방법
CN114967170B (zh) 基于柔性裸眼三维显示设备的显示处理方法及其装置
US20190281280A1 (en) Parallax Display using Head-Tracking and Light-Field Display
WO2005009052A1 (en) Head tracked autostereoscopic display
JP2011197675A (ja) 投影システム
CN108012139B (zh) 应用于真实感近眼显示的图像生成方法和装置
JP6846165B2 (ja) 画像生成装置、画像表示システム及びプログラム
KR101831978B1 (ko) 회전된 렌티큘러시트를 부착한 디스플레이에 표시되는 요소영상콘텐츠 생성 방법
CN110766752B (zh) 一种带反光标志点的虚拟现实交互眼镜及空间定位方法
KR101883883B1 (ko) 플립영상을 차단하는 무안경 원통형 홀로그램 디스플레이 방법
JP6768431B2 (ja) 画像生成装置及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant