CN106254804B - 光场显示控制方法和装置、光场显示设备 - Google Patents

光场显示控制方法和装置、光场显示设备 Download PDF

Info

Publication number
CN106254804B
CN106254804B CN201610029157.6A CN201610029157A CN106254804B CN 106254804 B CN106254804 B CN 106254804B CN 201610029157 A CN201610029157 A CN 201610029157A CN 106254804 B CN106254804 B CN 106254804B
Authority
CN
China
Prior art keywords
display
depth
district
light field
sub
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610029157.6A
Other languages
English (en)
Other versions
CN106254804A (zh
Inventor
周梁
杜琳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Zhigu Ruituo Technology Services Co Ltd
Original Assignee
Beijing Zhigu Ruituo Technology Services Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Zhigu Ruituo Technology Services Co Ltd filed Critical Beijing Zhigu Ruituo Technology Services Co Ltd
Priority to CN201610029157.6A priority Critical patent/CN106254804B/zh
Publication of CN106254804A publication Critical patent/CN106254804A/zh
Priority to US15/398,370 priority patent/US10698230B2/en
Application granted granted Critical
Publication of CN106254804B publication Critical patent/CN106254804B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/27Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving lenticular arrays
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0075Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for altering, e.g. increasing, the depth of field or depth of focus
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/128Adjusting depth or disparity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/307Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using fly-eye lenses, e.g. arrangements of circular lenses
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/339Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using spatial multiplexing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/363Image reproducers using image projection screens
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/74Projection arrangements for image reproduction, e.g. using eidophor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请实施例公开了一种光场显示控制方法和装置以及一种光场显示设备,其中一种光场显示控制方法包括:根据光场显示设备的显示景深范围和内容的深度分布信息,确定所述内容的至少一深度分布子区,所述至少一深度分布子区中每个深度分布子区位于所述显示景深范围之外;根据所述光场显示设备的显示景深范围和所述深度分布子区,至少相对光场显示设备的显示阵列的原平面倾斜第一显示单元,其中,所述第一显示单元为所述显示阵列中影响第一对象显示的显示单元,所述第一对象为所述内容位于所述深度分布子区内的部分。本申请可提高待显示或显示的内容中局部深度分布子区内的对象的显示质量。

Description

光场显示控制方法和装置、光场显示设备
技术领域
本申请涉及光场显示技术领域,特别是涉及一种光场显示控制方法和装置以及一种光场显示设备。
背景技术
光场显示技术早在20世纪初被提出,两种具有代表性的实现方式为:1908年Lippmann基于子透镜(Lenslet)阵列的实现方式以及1903年Ives基于平行光栅(ParallaxBarriers)的实现方式。近年来,伴随着消费级电子产品对显示设备的多样化需求,光场显示技术被运用到不同的场景和设备中,例如:3D显示阵列、可穿戴式设备、视力矫正的光场显示设备等,可实现相对灵活的显示效果,例如:光场3D显示、光场投影显示、穿戴式设备上的光场近眼显示、光场显示的视力纠正,等等。
目前,电子设备的计算能力、显示分辨率以及光场显示技术对硬件资源需求的逐渐匹配,为光场显示技术的推广应用提供了良好的支持,也引发业内人士更为广泛地关注和深度研究。
发明内容
在下文中给出了关于本申请的简要概述,以便提供关于本申请的某些方面的基本理解。应当理解,这个概述并不是关于本申请的穷举性概述。它并不是意图确定本申请的关键或重要部分,也不是意图限定本申请的范围。其目的仅仅是以简化的形式给出某些概念,以此作为稍后论述的更详细描述的前序。
本申请提供一种光场显示控制方法和装置以及一种光场显示设备。
第一方面,本申请实施例提供了一种光场显示控制方法,包括:
根据光场显示设备的显示景深范围和内容的深度分布信息,确定所述内容的至少一深度分布子区,所述至少一深度分布子区中每个深度分布子区位于所述显示景深范围之外;
根据所述光场显示设备的显示景深范围和所述深度分布子区,至少相对光场显示设备的显示阵列的原平面倾斜第一显示单元,其中,所述第一显示单元为所述显示阵列中影响第一对象显示的显示单元,所述第一对象为所述内容位于所述深度分布子区内的部分。
结合本申请实施例提供的任一种光场显示控制方法,可选地,至少经倾斜后的所述第一显示单元显示的所述第一对象在所述光场显示设备的第一显示平面的平均弥散圆,小于或等于一容许弥散圆,其中,所述第一显示平面为在深度方向上与一观看对焦距离对应且垂直深度方向的一显示平面。
结合本申请实施例提供的任一种光场显示控制方法,可选地,所述至少一深度分布子区的至少之一和所述显示景深范围深度连续变化。
结合本申请实施例提供的任一种光场显示控制方法,可选地,所述至少一深度分布子区的至少之一和所述显示景深范围深度非连续变化。
结合本申请实施例提供的任一种光场显示控制方法,可选地,所述根据所述光场显示设备的显示景深范围和所述深度分布子区,至少相对所述显示阵列的原平面倾斜第一显示单元,包括:根据所述显示景深范围和所述深度分布子区,相对所述显示阵列的原平面倾斜所述第一显示单元。
结合本申请实施例提供的任一种光场显示控制方法,可选地,根据所述显示景深范围和所述深度分布子区,相对所述显示阵列的原平面倾斜所述第一显示单元,包括:根据所述显示景深范围和所述深度分布子区确定所述第一对象的期望显示深度信息;至少根据所述第一子透镜的焦距和所述期望显示深度信息,确定所述第一显示单元的期望倾斜角度;至少根据所述期望倾斜角度相对所述显示阵列的原平面倾斜所述第一显示单元。
结合本申请实施例提供的任一种光场显示控制方法,可选地,所述至少根据所述期望倾斜角度相对所述显示阵列的原平面倾斜所述第一显示单元,包括:根据所述深度分布子区与所述显示景深范围在深度方向上的相对分布,确定所述第一显示单元的倾斜方向;根据所述倾斜方向和所述期望倾斜角度相对所述显示阵列的原平面倾斜所述第一显示单元。
结合本申请实施例提供的任一种光场显示控制方法,可选地,所述根据所述显示景深范围和所述深度分布子区,相对所述显示阵列的原平面倾斜所述第一显示单元,包括:根据所述显示景深范围和所述深度分布子区确定所述第一对象的期望显示深度信息;至少根据所述期望显示深度信息,确定所述第一显示单元的容许倾斜角度范围;至少根据所述容许倾斜角度范围相对所述显示阵列的原平面倾斜所述第一显示单元。
结合本申请实施例提供的任一种光场显示控制方法,可选地,所述至少根据所述期望显示深度信息,确定所述第一显示单元的容许倾斜角度范围,包括:至少根据所述第一子透镜的焦距和所述期望显示深度信息,确定所述第一显示单元的期望倾斜角度;至少根据所述期望倾斜角度确定所述容许夹角范围。
结合本申请实施例提供的任一种光场显示控制方法,可选地,所述至少根据所述容许倾斜角度范围相对所述显示阵列的原平面倾斜所述第一显示单元,包括:根据所述深度分布子区与所述显示景深范围在深度方向上的相对分布,确定所述第一显示单元的倾斜方向;根据所述倾斜方向和所述容许倾斜角度范围相对所述显示阵列的原平面倾斜所述第一显示单元。
结合本申请实施例提供的任一种光场显示控制方法,可选地,所述根据所述显示景深范围和所述深度分布子区,相对所述显示阵列的原平面倾斜所述第一显示单元之前,所述方法还包括:确定所述显示阵列中影响所述第一对象显示的显示单元为所述第一显示单元。
结合本申请实施例提供的任一种光场显示控制方法,可选地,确定所述显示阵列中影响所述第一对象显示的显示单元为所述第一显示单元,包括:根据所述期望显示深度信息、所述观看对焦距离和人眼瞳孔尺寸确定所述第一显示单元。
结合本申请实施例提供的任一种光场显示控制方法,可选地,所述根据所述光场显示设备的显示景深范围和所述深度分布子区,至少相对所述显示阵列的原平面倾斜第一显示单元,包括:根据所述光场显示设备的显示景深范围和所述深度分布子区,相对所述显示阵列的原平面倾斜所述第一显示单元以及相对所述子透镜阵列的原平面倾斜第一子透镜,其中,所述第一子透镜为所述光场显示设备中影响所述第一对象显示的子透镜。
结合本申请实施例提供的任一种光场显示控制方法,可选地,所述根据所述光场显示设备的显示景深范围和所述深度分布子区,相对所述显示阵列的原平面倾斜所述第一显示单元以及相对所述子透镜阵列的原平面倾斜第一子透镜,包括:根据所述显示景深范围和所述深度分布子区确定所述第一对象的期望显示深度信息;至少根据所述第一子透镜的焦距、所述期望显示深度信息和所述显示阵列和所述子透镜阵列之间的距离,确定所述第一显示单元的第一倾斜角度和所述第一子透镜的第二倾斜角度;根据所述第一倾斜角度相对所述显示阵列的原平面倾斜所述第一显示单元、以及根据所述第二倾斜角度相对所述子透镜阵列的原平面倾斜所述第一子透镜。
结合本申请实施例提供的任一种光场显示控制方法,可选地,所述根据所述第一倾斜角度相对所述显示阵列的原平面倾斜所述第一显示单元、以及根据所述第二倾斜角度相对所述子透镜阵列的原平面倾斜所述第一子透镜之前,所述方法还包括:确定所述显示阵列中影响所述第一对象显示的显示单元为所述第一显示单元、以及所述子透镜阵列中影响所述第一对象显示的子透镜为所述第一子透镜。
结合本申请实施例提供的任一种光场显示控制方法,可选地,所述确定所述显示阵列中影响所述第一对象显示的显示单元为所述第一显示单元、以及所述子透镜阵列中影响所述第一对象显示的子透镜为所述第一子透镜,包括:根据所述期望显示深度信息、所述观看对焦距离和人眼瞳孔尺寸确定所述第一显示单元;根据所述显示阵列中的显示单元和所述子透镜阵列中的子透镜之间的对应关系,确定所述子透镜阵列中与所述第一显示单元对应的子透镜为所述第一子透镜。
结合本申请实施例提供的任一种光场显示控制方法,可选地,所述根据所述显示景深范围和所述深度分布子区确定所述第一对象的期望显示深度信息,包括:根据所述显示景深范围和所述深度分布子区,确定所述显示景深范围内的一显示深度为所述第一对象的期望显示深度信息。
结合本申请实施例提供的任一种光场显示控制方法,可选地,所述根据所述显示景深范围和所述深度分布子区,确定所述显示景深范围内的一显示深度为所述第一对象的期望显示深度信息,包括:根据所述深度分布子区与所述显示景深范围在深度方向上的相对分布,确定所述显示景深范围中靠近所述深度分布子区的一显示深度为所述第一对象的期望显示深度信息。
第二方面,本申请实施例还提供了一种光场显示控制装置,包括:
一深度分布子区确定模块,用于根据光场显示设备的显示景深范围和内容的深度分布信息,确定所述内容的至少一深度分布子区,所述至少一深度分布子区中每个深度分布子区位于所述显示景深范围之外;
一倾斜控制模块,用于根据所述光场显示设备的显示景深范围和所述深度分布子区,至少相对光场显示设备的显示阵列的原平面倾斜第一显示单元,其中,所述第一显示单元为所述显示阵列中影响第一对象显示的显示单元,所述第一对象为所述内容位于所述深度分布子区内的部分。
结合本申请实施例提供的任一种光场显示控制装置,可选地,至少经倾斜后的所述第一显示单元显示的所述第一对象在所述光场显示设备的第一显示平面的平均弥散圆,小于或等于一容许弥散圆,其中,所述第一显示平面为在深度方向上与一观看对焦距离对应且垂直深度方向的一显示平面。
结合本申请实施例提供的任一种光场显示控制装置,可选地,所述至少一深度分布子区的至少之一和所述显示景深范围深度连续变化。
结合本申请实施例提供的任一种光场显示控制装置,可选地,所述至少一深度分布子区的至少之一和所述显示景深范围深度非连续变化。
结合本申请实施例提供的任一种光场显示控制装置,可选地,所述倾斜控制模块包括:一第一倾斜控制子模块,用于根据所述显示景深范围和所述深度分布子区,相对所述显示阵列的原平面倾斜所述第一显示单元。
结合本申请实施例提供的任一种光场显示控制装置,可选地,所述第一倾斜控制子模块包括:一第一期望显示深度信息确定单元,用于根据所述显示景深范围和所述深度分布子区确定所述第一对象的期望显示深度信息;一第一期望倾斜角度确定单元,用于至少根据所述第一子透镜的焦距和所述期望显示深度信息,确定所述第一显示单元的期望倾斜角度;一第一倾斜单元,用于至少根据所述期望倾斜角度相对所述显示阵列的原平面倾斜所述第一显示单元。
结合本申请实施例提供的任一种光场显示控制装置,可选地,所述第一倾斜单元包括:一第一倾斜方向子单元,用于根据所述深度分布子区与所述显示景深范围在深度方向上的相对分布,确定所述第一显示单元的倾斜方向;一第一倾斜子单元,用于根据所述倾斜方向和所述期望倾斜角度相对所述显示阵列的原平面倾斜所述第一显示单元。
结合本申请实施例提供的任一种光场显示控制装置,可选地,所述第一倾斜控制子模块包括:一第二期望显示深度信息确定单元,用于根据所述显示景深范围和所述深度分布子区确定所述第一对象的期望显示深度信息;一容许倾斜角度范围确定单元,用于至少根据所述期望显示深度信息,确定所述第一显示单元的容许倾斜角度范围;一第二倾斜控制单元,用于至少根据所述容许倾斜角度范围相对所述显示阵列的原平面倾斜所述第一显示单元。
结合本申请实施例提供的任一种光场显示控制装置,可选地,所述容许倾斜角度范围确定单元包括:一期望倾斜角度确定子单元,用于至少根据所述第一子透镜的焦距和所述期望显示深度信息,确定所述第一显示单元的期望倾斜角度;一容许夹角范围确定子单元,用于至少根据所述期望倾斜角度确定所述容许夹角范围。
结合本申请实施例提供的任一种光场显示控制装置,可选地,所述第二倾斜控制单元包括:一第二倾斜方向确定子单元,用于根据所述深度分布子区与所述显示景深范围在深度方向上的相对分布,确定所述第一显示单元的倾斜方向;一第二倾斜控制子单元,用于根据所述倾斜方向和所述容许倾斜角度范围相对所述显示阵列的原平面倾斜所述第一显示单元。
结合本申请实施例提供的任一种光场显示控制装置,可选地,所述装置还包括:一第一倾斜部件确定模块,确定所述显示阵列中影响所述第一对象显示的显示单元为所述第一显示单元。
结合本申请实施例提供的任一种光场显示控制装置,可选地,所述第一倾斜部件确定模块包括:一第一倾斜部件确定子模块,用于根据所述期望显示深度信息、所述观看对焦距离和人眼瞳孔尺寸确定所述第一显示单元。
结合本申请实施例提供的任一种光场显示控制装置,可选地,所述倾斜控制模块包括:一第二倾斜控制子模块,用于根据所述光场显示设备的显示景深范围和所述深度分布子区,相对所述显示阵列的原平面倾斜所述第一显示单元以及相对所述子透镜阵列的原平面倾斜第一子透镜,其中,所述第一子透镜为所述光场显示设备中影响所述第一对象显示的子透镜。
结合本申请实施例提供的任一种光场显示控制装置,可选地,所述第二倾斜控制子模块包括:一第三期望显示深度信息确定单元,用于根据所述显示景深范围和所述深度分布子区确定所述第一对象的期望显示深度信息;一倾斜角度确定单元,用于至少根据所述第一子透镜的焦距、所述期望显示深度信息和所述显示阵列和所述子透镜阵列之间的距离,确定所述第一显示单元的第一倾斜角度和所述第一子透镜的第二倾斜角度;一第三倾斜控制单元,用于根据所述第一倾斜角度相对所述显示阵列的原平面倾斜所述第一显示单元、以及根据所述第二倾斜角度相对所述子透镜阵列的原平面倾斜所述第一子透镜。
结合本申请实施例提供的任一种光场显示控制装置,可选地,所述装置还包括:一显示单元确定模块,用于根据所述期望显示深度信息、所述观看对焦距离和人眼瞳孔尺寸确定所述第一显示单元;一子透镜确定模块,用于根据所述显示阵列中的显示单元和所述子透镜阵列中的子透镜之间的对应关系,确定所述子透镜阵列中与所述第一显示单元对应的子透镜为所述第一子透镜。
第三方面,本申请实施例提供了另一种光场显示控制装置,包括:
一处理器、一通信接口、一存储器以及一通信总线;所述处理器、所述通信接口以及所述存储器通过所述通信总线完成相互间的通信;
所述存储器用于存放至少一指令;所述指令使所述处理器执行以下操作:
根据光场显示设备的显示景深范围和内容的深度分布信息,确定所述内容的至少一深度分布子区,所述至少一深度分布子区中每个深度分布子区位于所述显示景深范围之外;
根据所述光场显示设备的显示景深范围和所述深度分布子区,相对光场显示设备的显示阵列的原平面至少倾斜第一显示单元,其中,所述第一显示单元为所述显示阵列中影响第一对象显示的显示单元,所述第一对象为所述内容位于所述深度分布子区内的部分。
第四方面,本申请实施例提供了一种光场显示设备,包括:
一显示阵列,包括阵列分布的多个可相对所述显示阵列的原平面倾斜的显示单元;
一子透镜阵列,包括阵列分布的多个子透镜;
一本申请实施例提供的任一所述的光场显示控制装置,所述光场显示控制装置分别与所述显示阵列和所述子透镜阵列连接。
结合本申请实施例提供的任一种光场显示设备,可选地,所述多个子透镜可相对所述子透镜阵列的原平面倾斜。
本申请实施例提供的技术方案根据所述光场显示设备当前的显示景深范围和待需要进行像质量控制的深度分布子区,至少相对显示阵列原平面倾斜第一显示单元,以至少通过对第一显示单元的倾斜控制来改变所述第一对象在空间中的显示像距,使得所述第一对象经所述第一子透镜显示后所成的虚像的平均显示像距尽可能分布在所述光场显示设备当前的显示景深范围内,由此提高至少经倾斜后的第一显示单元所显示的所述第一对象的显示质量。该方案在原有显示景深范围内清晰成像的基础上,充分利用至少倾斜显示单元的控制手段来提高所述显示景深范围之外的至少一深度分布子区内的对象的显示质量,效果上一定程度上相当于用户可看清比原显示景深范围更广的深度范围的对象,并且该显示质量调整过程无需对光场源内容的繁琐计算,通过调整相应子透镜的焦距即可对原显示景深范围之外的对象的显示质量进行调整,方案简单,便于控制。此外,本申请在光场显示设备现有显示像素资源的基础上,为某些情形下受限于显示像素资源而无法清晰显示的部分深度分布子区内的对象的清晰显示提供了技术手段,方案简单,便于控制。
通过以下结合附图对本申请的可选实施例的详细说明,本申请的这些以及其它的优点将更加明显。
附图说明
本申请可以通过参考下文中结合附图所给出的描述而得到更好的理解,其中在所有附图中使用了相同或相似的附图标记来表示相同或者相似的部件。所述附图连同下面的详细说明一起包含在本说明书中并且形成本说明书的一部分,而且用来进一步举例说明本申请的可选实施例和解释本申请的原理和优点。在附图中:
图1为本申请实施例提供的一种光场显示控制方法的流程图;
图2a为本申请实施例提供的光场显示设备及其光场显示示例一;
图2b为本申请实施例提供的光场显示设备及其光场显示示例二;
图2c为本申请实施例提供的第一子透镜的确定示例;
图3a为本申请实施例提供的深度分布子区与景深范围深度分布关系的示例之深度连续分布;
图3b为本申请实施例提供的深度分布子区与景深范围深度分布关系的示例之深度非连续分布;
图3c为本申请实施例提供的深度分布子区与景深范围深度分布关系的示例之深度连续分布和深度非连续分布;
图4为本申请实施例提供的光场显示设备及其光场显示示例三;
图5为本申请实施例提供的第一种光场显示控制装置的逻辑框图;
图6为本申请实施例提供的第二种光场显示控制装置的逻辑框图;
图7为本申请实施例提供的第三种光场显示控制装置的逻辑框图;
图8为本申请实施例提供的第四种光场显示控制装置的逻辑框图;
图9为本申请实施例提供的一种光场显示设备的结构示意图。
本领域技术人员应当理解,附图中的元件仅仅是为了简单和清楚起见而示出的,而且不一定是按比例绘制的。例如,附图中某些元件的尺寸可能相对于其他元件放大了,以便有助于提高对本申请实施例的理解。
具体实施方式
在下文中将结合附图对本申请的示范性实施例进行详细描述。为了清楚和简明起见,在说明书中并未描述实际实施方式的所有特征。然而,应该了解,在开发任何这种实际实施例的过程中必须做出很多特定于实施方式的决定,以便实现开发人员的具体目标,例如,符合与系统及业务相关的那些限制条件,并且这些限制条件可能会随着实施方式的不同而有所改变。此外,还应该了解,虽然开发工作有可能是非常复杂和费时的,但对得益于本公开内容的本领域技术人员来说,这种开发工作仅仅是例行的任务。
在此,还需要说明的一点是,为了避免因不必要的细节而模糊了本申请,在附图和说明中仅仅描述了与根据本申请的方案密切相关的装置结构和/或处理步骤,而省略了对与本申请关系不大的、本领域普通技术人员已知的部件和处理的表示和描述。
下面结合附图(若干附图中相同的标号表示相同的元素)和实施例,对本申请的具体实施方式作进一步详细说明。以下实施例用于说明本申请,但不用来限制本申请的范围。
本领域技术人员可以理解,本申请中的“第一”、“第二”等术语仅用于区别不同步骤、设备或模块等,既不代表任何特定技术含义,也不表示它们之间的必然逻辑顺序。
图1为本申请实施例提供的一种光场显示控制方法的流程图。本申请实施例提供的光场显示控制方法的执行主体可为某一光场显示控制装置,所述光场显示控制装置可在但不限于涉及图像呈现、视频播放等应用过程中通过执行该光场显示控制方法进行图像的显示控制。所述光场显示控制装置的设备表现形式不受限制,例如所述光场显示控制装置可为某一独立的部件,该部件与光场显示设备配合通信;或者,所述光场显示控制装置可作为某一功能模块集成在光场显示设备中,所述光场显示设备可包括但不限于具有光场显示能力的电子设备,例如所述光场显示设备可包括但不限于近眼光场显示设备,所述近眼光场显示设备可包括但不限于智能头盔、智能眼镜等。具体如图1所示,本申请实施例提供的一种光场显示控制方法包括:
S101:根据光场显示设备的显示景深范围和内容的深度分布信息,确定所述内容的至少一深度分布子区,所述至少一深度分布子区中每个深度分布子区位于所述显示景深范围之外。
光场显示设备包括紧邻设置的显示阵列和子透镜阵列,如图2a所示。所述显示阵列可为由多个阵列分布的显示单元拼接而成的显示器,每个显示单元包括阵列分布的多个显示像素,每个显示单元可显示一子图像,所述子图像为所述内容的图像的某一局部。所述子透镜阵列也可称为微透镜阵列,包括多个阵列分布的子透镜(或称为微透镜),来自显示阵列的光线经所述子透镜阵列中的至少一个子透镜改变传播方向,传播方向改变后的光线经用户的眼睛(类似透镜)在用户的视网膜上成像,如果在视网膜局部成像的平均弥散圆较小,相当于用户可看清空间中显示的该局部成像对应的虚像,反之,如果在视网膜局部成像的平均弥散圆较大,相当于空间中显示的该局部成像对应的虚像就用户看来较为模糊。此外,由于显示阵列和子透镜阵列紧邻设置(需要说明的是,图中各部件之间的相对距离仅为示例性说明,不代表各部件之间的实际距离),因此,经所述至少一子透镜传播方向改变后的光线在显示阵列远离用户的一侧成一虚像,该虚像与用户视网膜所成的像对应,相当于人眼透过子透镜阵列所看到的像,该虚像在空间中可呈现一定的深度分布,虚像在光场显示设备当前的第一显示平面上的弥散圆分布与视网膜所成的像的弥散圆分布对应,例如,虚像某部分在所述第一显示平面上的平均弥散圆较大,则该部分在视网膜所成的像的平均弥散圆也较大,反之亦然。
光场显示设备在进行光场显示过程中,所显示的内容在空间上存在显示景深(Depth of Field,简称DoF)范围,所述显示景深范围是在深度方向上存在一定深度宽度分布的范围、且该范围包括第一显示平面所在的深度位置,所述第一显示平面为在深度方向上与一观看对焦距离对应且垂直深度方向的一显示平面,所述观看对焦距离可为某一缺省的人眼对焦距离(如默认观看所述第一显示平面上所成的虚像的最佳距离为25cm,人眼在该观看距离处可清晰看到所述第一显示平面上所成的虚像,换而言之,所述第一显示平面显示的内容能够在处于观看对焦距离处的人眼的视网膜清晰成像),或者,所述观看对焦距离可为实际的人眼对焦距离等等。实际应用中,在确定好适合的观看对焦距离之后,可确定与所述观看对焦距离对应的第一显示平面,不妨以近眼光场显示设备为例进行说明,在使用近眼光场显示设备(如佩戴具有光场显示能力的智能眼镜)观看显示内容时通常人眼和近眼光场显示设备之间的距离L相对固定,计算所述观看对焦距离与所述距离L之间的差值,并在深度方向上确定与该差值对应的深度位置即为所述第一显示平面的深度位置;在确定好所述第一显示平面后,可确定光场显示设备的显示景深范围,例如,可根据显示质量预期、人眼特征等一种或多种参数确定成像的容许弥散圆(permissible circle ofconfusion),计算在深度方向上相对所述第一显示平面不同距离处的平均成像弥散圆,将包括所述第一显示平面的深度位置且平均成像弥散圆小于容许弥散圆的连续深度范围,确定为所述显示景深范围;进一步地,可结合考虑人眼对不同深度所显示内容清晰度的视觉敏感性来优化所述显示景深范围,例如,人眼对较近处显示的内容清晰度的视觉敏感性要高于对较远处显示的内容清晰度的视觉敏感性,因此,可以所述第一显示平面的深度位置为参考,确定相对所述第一显示平面的深度位置较近的深度处的容许弥散圆为一较小的容许弥散圆门限值(C1),而相对所述第一显示平面的深度位置较远的深度处的容许弥散圆为一较大的容许弥散圆门限值(C2),进而确定所述显示景深范围,确定的所述显示景深范围表现为包括所述第一显示平面的深度位置且沿所述第一显示平面的深度位置非对称分布的一定深度范围。当然,以上所述第一显示平面以及所述显示景深范围的确定方法,仅为示例性说明,本领域技术人员还可采用其他方法进行确定,本申请实施例对此并不限制。在所述显示景深范围内所显示的虚像在所述第一显示平面所对应的观看对焦距离处的人眼看来通常是清晰的,而显示景深范围之外所显示的虚像在与所述第一显示平面所对应的观看对焦距离处的人眼看来通常是模糊的。
所述内容为正在显示或待显示的内容。所述内容的深度分布信息是指所述内容处于显示状态时其各部分在深度方向上的分布信息。可至少根据所述内容的深度分布信息确定至少一深度分布子区,作为需要进行显示质量控制的深度分布子区显示质量,其中,所述至少一深度分布子区中每个深度分布子区位于所述光场显示设备的显示景深范围之外。
S102:根据所述光场显示设备的显示景深范围和所述深度分布子区,至少相对光场显示设备的显示阵列的原平面倾斜第一显示单元,其中,所述第一显示单元为所述显示阵列中影响第一对象显示的显示单元,所述第一对象为所述内容位于所述深度分布子区内的部分。
本申请发明人在实践本申请实施例过程中发现,如果需要调整所述内容不同部分的清晰度,可改变所述光场显示设备当前的所述第一显示平面,所述第一显示平面改变之后,相当于重新确定了光场显示设备的显示景深范围,基于所显示内容的深度分布信息和重新确定的显示景深范围,可调整光场显示设备清晰显示的部分。例如,光场显示设备当前清晰显示的内容为深度较浅的前景部分,通过所述第一显示平面的调整,可改变为清晰显示深度较深的背景部分,等等。而重新确定所述第一显示平面通常需要对光场显示设备所显示的源内容进行处理,运算量大,运算复杂度高,显示速度较慢,为此本申请提出了新的解决方案。此外,光场显示技术是以牺牲空间分辨率为代价来换取丰富灵活的显示效果,需要多个显示像素方可实现同一对象的显示。基于光场显示技术目前的显示像素资源,虽然可带来第一显示平面可调的灵活的显示效果,但即便将各个第一显示平面及其景深范围在深度方向上拼接起来,某些情形下,也可能存在深度方向上的局部深度子区无法清晰显示,也就是说,人眼总是无法看清这些局部深度子区上的对象。
通过显示阵列进行光场显示,除了具有可提高整体显示像素点的个数即分辨率、减低成本等优点之外,还可通过倾斜控制实现更为灵活的显示能力。具体而言,发明人注意到倾斜显示元件可改变第一对象的显示像距,所述显示元件可包括但不限于显示单元和/或子透镜。为此,本申请实施例提供的技术方案充分利用这一显示像距调整手段,根据所述光场显示设备当前的显示景深范围和待需要进行像质量控制的深度分布子区,至少相对显示阵列原平面(所述显示阵列即为处于各显示单元处于非倾斜状态下的该显示阵列所在的平面)倾斜第一显示单元,以至少通过对第一显示单元的倾斜控制来改变所述第一对象在空间中的显示像距,使得所述第一对象经所述第一子透镜显示后所成的虚像的平均显示像距尽可能分布在所述光场显示设备当前的显示景深范围内,由此提高至少经倾斜后的第一显示单元所显示的所述第一对象的显示质量。不妨以近眼光场显示为例进行说明,假设第一显示平面与人眼的距离为25cm(即观看对焦距离为25cm),则该第一显示平面在深度上分布的某一深度范围(即显示景深范围),如[25cm-5cm,25cm+7cm]这一段深度范围的像相对人眼是清晰成像的,如果用户希望看到该显示景深范围之外的像,如看清距离人眼[32cm,35cm]处(即显示景深范围之外的某一深度分布子区)的像,则可至少通过相对显示阵列的原平面倾斜相应的显示单元,使得相同对象的像都显示在显示景深范围内,由此提高该对象的显示清晰度,使用户可看清该对象。该方案在原有显示景深范围内清晰成像的基础上,还充分利用至少倾斜显示单元的控制手段来提高所述显示景深范围之外的至少一深度分布子区内的对象的显示质量,效果上一定程度上相当于用户可看清比原显示景深范围更广的深度范围的对象,并且该显示质量调整过程无需对光场源内容的繁琐计算,通过调整相应子透镜的焦距即可对原显示景深范围之外的对象的显示质量进行调整,方案简单,便于控制。此外,该方案在光场显示设备现有显示像素资源的基础上,为某些情形下受限于显示像素资源而无法清晰显示的部分深度分布子区内的对象的清晰显示提供了技术手段,方案简单,便于控制。
所述第一显示单元即为影响所述第一对象显示的显示单元,所述第一子透镜为所述光场显示设备的子透镜阵列中影响第一对象显示的子透镜,也就是说,所述第一显示单元显示了所述第一对象对应的子图像,所述第一显示单元发出的显示光线经与所述第一显示单元对应的第一子透镜作用后可在空间中显示为呈一定深度分布的虚像。影响第一对象显示的显示单元(或子透镜)可为一个或多个,因此,在实际应用中,所述第一显示单元可为一个或多个,相应的,所述第一子透镜可为一个或多个,可对一个或多个第一显示单元(和/或第一子透镜)进行倾斜控制,以提高所显示的第一对象的清晰度,改善显示质量。
所述第一对象经如光场显示设备进行显示时,由于光波性质、像差等因素的影响,对象上的点的成像光束通常不能汇聚于一点,而是在像平面上形成一个扩散的正圆形、椭圆形或其他类圆形的投影,即弥散圆(circle of confusion),也可称为弥散圈、弥散环、散光圈、模糊圈、散射圆盘等。某点成像的弥散圆尺寸可采用下式进行计算:
上式中:E表示人眼瞳孔的尺寸,如人眼瞳孔的直径等;da表示观看对焦距离,即与光场显示设备当前的第一显示平面与人眼瞳孔之间的距离;d0表示对象的显示深度,如对象的虚像在深度方向距离位于观看对焦距离的人眼之间的平均距离;ca表示显示深度为d0的像点在人眼成像所产生的弥散圆的尺寸,如弥散圆的直径等。
所述第一对象经倾斜后的光学元件(所述光学元件至少包括所述第一显示单元,如所述光学元件包括所述第一显示单元,或者,所述光学元件包括所述第一显示单元和所述第一子透镜等)显示后在空间中所成的虚像在光场显示设备当前的所述第一显示平面上的弥散圆分布,与虚像经人眼的等效透镜作用后在视网膜所成的像在视网膜上的弥散圆分布对应。通常,如果弥散圆的尺寸较小,该弥散圆对应的对象的成像相对较为清晰,相对人眼可被视为该点的合焦成像,成像清晰;相应的,如果弥散圆的尺寸超过一定的容许范围,则该弥散圆对应的对象的成像相对模糊。本申请实施例通过对光学元件进行倾斜控制,将相应对象经倾斜后的光学元件显示后在光场显示设备的所述第一显示平面或视网膜成像的平均弥散圆小于或等于一容许弥散圆,作为光学元件倾斜控制的收敛条件,也就是说,通过对所述光学元件的倾斜控制,使得经倾斜后的光学元件显示的所述第一对象各点在光场显示设备的所述第一显示平面或视网膜所成的像的平均弥散圆小于或等于一容许弥散圆,如图2b所示,所述第一对象经倾斜控制后的光学元件显示后的虚像对应的视网膜成像的平均弥散圆有所减小,由此提高所显示的所述第一对象各点的平均清晰度。需要说明的是,所述第一对象中的各点是个相对的概念,如可以显示阵列中单个显示像素显示的部分作为所述第一对象中的一个点等,本申请实施例对此并不限制。
本申请实施例提供的任一种技术方案中,所述深度分布子区的确定方式及数量可根据实际需要确定,实现方式非常灵活。例如,可根据用户的输入信息,确定所述内容中除所述显示景深范围之外的至少部分深度区域为所述至少一深度分布子区;又例如,可将所述显示景深范围和所述内容的图像分析结果,确定所述内容中除所述显示景深范围之外的至少部分深度区域为所述至少一深度分布子区;等等。可以理解,确定出的所述至少部分深度区域整体可作为一所述深度分布子区,或者,确定出的所述至少部分深度区域也可按一定条件进行划分以得到多个所述深度分布子区,等等。本申请实施例对上述具体实现方式并不限制,可更好满足多样化的实际应用需求。
所述深度分布子区包括的深度范围和数量可在所述内容位于所述显示景深范围之外的其他深度范围内灵活确定,以满足多样化的应用需求。
可选地,所述至少一深度分布子区的至少之一和所述显示景深范围深度连续变化,也就是说,所述至少一深度分布子区中的至少一个深度分布子区的一个边界在深度方向上和所述显示景深范围的一个边界是相邻的,如图3a或图3b所示。该方案有利于提高正在显示或待显示的所述内容中位于所述显示景深范围周边的对象的显示质量,从用户观看的效果上来看,一定程度上相当于用户可看清比原显示景深范围更广的深度范围的对象。
可选地,所述至少一深度分布子区的至少之一和所述显示景深范围深度非连续变化,也就是说,所述至少一深度分布子区中的至少一个深度分布子区的各边界在深度方向上和所述显示景深范围的各边界都是不相邻的,如图3b或图3c所示。该方案有利于提高正在显示或待显示的所述内容中位于所述显示景深范围之外的对象的显示质量,从用户观看的效果上,一定程度上相当于用户可看清比原显示景深范围更广的深度范围的对象。
确定好所述深度分布子区之后,可至少根据所述光场显示设备的显示景深范围和所述深度分布子区,至少相对光场显示设备的显示阵列的原平面倾斜第一显示单元以提高显示质量,具体倾斜控制的实现方式非常灵活。
(一)一种可选的实现方式中,可根据所述显示景深范围和所述深度分布子区,相对所述显示阵列的原平面倾斜所述第一显示单元,以调整经所述第一显示单元显示的第一对象的显示像距,进而提高所述第一对象的显示质量。
可选地,根据所述显示景深范围和所述深度分布子区,相对所述显示阵列的原平面倾斜所述第一显示单元,包括:根据所述显示景深范围和所述深度分布子区确定所述第一对象的期望显示深度信息;至少根据所述第一子透镜的焦距和所述期望显示深度信息,确定所述第一显示单元的期望倾斜角度;至少根据所述期望倾斜角度相对所述显示阵列的原平面倾斜所述第一显示单元。
所述第一显示单元相对所述显示阵列的原平面倾斜之后,如图2b所示,所述第一显示阵列所在平面与所述子透镜阵列所在的平面不再平行。参考沙姆定律(Scheimpflugprinciple),当所述深度分布子区内的第一对象经所述第一显示单元和与之对应的第一子透镜所成的像所在的平面(以下不妨称为对象显示平面)的延长面、所述第显示单元倾斜后所在平面的延长面、所述第一子透镜所在的平面(在所述第一子透镜处于非倾斜状态时,所述第一子透镜所在的平面即为所述子透镜阵列的原平面)的延长面,三者相交于一直线(可称为沙姆交线)时,所述深度分布子区内的第一对象可获得清晰成像的区域最大、平均弥散圆最小;满足上述沙姆定律的所述第一子透镜的倾斜角度即为本申请实施例所述的期望倾斜角度。
所述对象显示平面可根据所述深度分布子区内各像点在所述显示景深范围内的期望分布(即所述第一对象的期望显示深度信息)拟合而得,可选实现方式例如:
(a1)假设所述内容为一清晰的2D图像(所述2D图像经光场显示之后在空间显示为具有一定显示深度分布的3D图像),可根据所述2D图像的深度分布信息,确定其部分深度分布子区中的第一对象中的各点分别在所述2D图像中图像坐标集{(xi,yi)}。
(b1)根据上述确定的各点的图像坐标集,确定各点分别对应的虚像点的第一空间坐标集,任一像点的第一空间坐标可表示为p(x′i,y′i,d′i),其中,x′i=M1xi,y′i=M2yi,M为已知的缩放系数,如M1为已知的X方向的缩放系数,M2为已知的Y方向的缩放系数,d′i表示该像点的像距,即该像点映射前的像距。
(c1)根据确定的第一空间坐标集和光场显示设备当前的显示景深范围,将第一空间坐标集中的各点坐标分别映射到所述显示景深范围内的某一深度子范围内,由此得到一组第二空间坐标集,任一像点的第二空间坐标可表示为p′(x″i,y″i,d″i),其中,x″i表示该像点在所述第一显示平面上的横向坐标;y″i表示该像点在所述第一显示平面上的纵向坐标;d″i表示映射后该像点的像距。其中,所述映射可采用一定规则进行,例如是在保持所述深度分布子区内各像点之间的相对深度关系的前提下,将所述各像点映射到所述显示景深范围内的某一深度子范围内,也就是说,调整前任意二个像点p1和像点p2之间的相对深度关系为二者的像距满足dp2≥dp1,则调整后二者的像距满足dp2'≥dp1',发生改变的是像点调整前后的像距差值,如二个像点调整前的像距之差(dp2-dp1)大于这二个像点调整后的像距之差(dp2'-dp1'),即(dp2-dp1)≥(dp2'-dp1'),相当于将所述深度分布子区内的第一对象在深度上进行一定程度的压缩,以便于提高所述第一对象更多部分的显示质量。可选地,可在满足保持像点间相对深度关系不变的前提下进行比例映射,如要将像距分别为{25,28,42,45}的4个像点映射到显示深度子区[30,40]内,则映射后各像点的像距分别为{25+(30-25)*25/25,(28+30-25)*25/28,(42-5)*45/42,(45-5)*45/45},由此映射保持了各像点映射前后的相对深度关系不变。
(d1)根据所述第二空间坐标集拟合一平面。本步骤相当于给定一组空间点坐标(Point Cloud),并从中拟合得到一平面,使得该组空间点坐标中各点到该平面的距离之和最小;进一步地,在拟合过程中可保证最小距离之和小于一预设值,否则,可拟合多个平面直到最小距离之和小于该预设值为止。平面拟合所采用的算法为现有技术,如采用但不限于随机抽样一致算法(Random Sample Consensus,简称RANSC)等,不再赘述。
进一步可选地,所述第一显示单元的期望倾斜角度可采用下式计算:
上式中:θ表示所述第一显示单元的期望倾斜角度;f表示第一子透镜的焦距、表示所述对象成像平面与所述显示阵列的原平面之间的夹角,u表示所述第一子透镜的光心沿垂直所述显示阵列的原平面的方向到所述第一显示单元中心之间的距离,即为图中的子透镜阵列的原平面到显示阵列的原平面之间的距离dl。至少根据该方案确定的期望倾斜角度相对与所述显示阵列的原平面倾斜所述第一显示单元,使得所述第一显示单元相对与所述显示阵列的原平面之间的倾斜角度,尽可能接近甚至等于所述期望倾斜角度,并且在所述第一显示单元处于倾斜后的状态下进行图像显示时,所述深度分布子区内的第一对象在所述第一显示平面或用户视网膜上所成的像平均弥散圆尽可能小。该方案提高了所述第一显示单元倾斜控制的效率,且经倾斜后的所述第一显示单元显示的所述第一对象可获得清晰成像的区域较大。
实际应用中,可根据所述期望倾斜角度相对所述显示阵列的原平面对所述第一显示单元进行倾斜控制,使得所述第一显示单元相对所述显示阵列的原平面的倾斜角度尽可能接近甚至等于所述期望倾斜角度。
或者,也可根据所述深度分布子区与所述显示景深范围在深度方向上的相对分布,确定所述第一显示单元的倾斜方向,根据所述倾斜方向和所述期望倾斜角度相对所述显示阵列的原平面倾斜所述第一显示单元;采用该方案可提高所述第一显示单元倾斜控制的效率,使得所述第一显示单元的倾斜控制尽快符合平均弥散圆的收敛条件。具体而言,所述第一显示单元倾斜后可改变所述第一对象的显示像距,要将所述第一对象的实际像距调整到所述光场显示设备的显示景深范围内,则可根据所述深度分布子区与所述显示景深范围在深度方向上的相对分布,确定所述第一显示单元的倾斜方向,以提高所述第一显示单元倾斜控制的效率。例如,如图2b所示,如果所述第一对象的深度分布子区相对所述显示景深范围位于深度较深的位置(如某点经未倾斜的第一显示单元和与其对应的第一子透镜的显示的像点p2的像距dp2,该像距dp2相对所述显示景深范围位于深度较深的位置),则期望将所述第一对象的显示像距调整至深度较浅的一深度位置(如期望该点经未倾斜的第一显示单元和第一子透镜显示的像点p2的像距dp2,经过倾斜后的所述第一显示单元和第一子透镜成像到dp2″深度,且dp2>dp2″),则可确定所述第一显示单元的倾斜方向为第一方向,所述第一方向为增大所述第一显示单元所在的平面和所述子透镜阵列所在的平面(即未倾斜的所述第一子透镜所在的平面)之间的夹角的方向,所述第一显示单元相对所述显示阵列的原平面朝所述第一方向倾斜所述期望倾斜角度,则可在所述第一显示单元的倾斜控制过程中尽快满足相应平均弥散圆的收敛条件,提高所述第一显示单元的倾斜控制效率。又例如,如果所述第一对象的深度分布子区相对所述显示景深范围位于深度较浅的位置,则期望将所述第一对象的显示像距调整至像深度较深的一深度位置,则可确定所述第一显示单元的倾斜方向为第二方向,所述第二方向为减小所述第一显示单元所在的平面和所述子透镜阵列所在的平面(即未倾斜的所述第一子透镜所在的平面)之间的夹角的方向,所述第一显示单元相对所述显示阵列的原平面朝所述第二方向倾斜所述期望倾斜角度,则可在所述第一显示单元的倾斜控制过程中尽快满足相应平均弥散圆的收敛条件,提高所述第一显示单元的倾斜控制效率。
或者,可选地,所述根据所述显示景深范围和所述深度分布子区,相对所述显示阵列的原平面倾斜所述第一显示单元,包括:根据所述显示景深范围和所述深度分布子区确定所述第一对象的期望显示深度信息;至少根据所述期望显示深度信息,确定所述第一显示单元的容许倾斜角度范围;至少根据所述容许倾斜角度范围相对所述显示阵列的原平面倾斜所述第一显示单元。采用该方案相对所述显示阵列的原平面倾斜所述第一显示单元,倾斜后的所述第一显示单元与所述显示阵列的原平面之间的夹角(如倾斜后的所述第一显示单元所在的平面和所述显示阵列的原平面之间的夹角)落入所述容许夹角范围。其中,所述容许夹角范围可根据显示单元倾斜后能够带来相应对象成像的平均弥散圆减小的要求下灵活确定,本申请实施例对此并不限制。该方案提高了第一显示单元倾斜控制的效率,且可提高经倾斜后的所述第一显示单元和与其对应的第一子透镜显示的所述第一对象的清晰度。
所述容许夹角范围可根据显示单元倾斜后能够带来相应平均弥散圆减小的要求下预先确定,确定的方法可包括但不限于采用实验手段、模拟仿真、公式推导等方式确定。可选地,所述至少根据所述期望显示深度信息,确定所述第一显示单元的容许倾斜角度范围,包括:至少根据所述第一子透镜的焦距和所述期望显示深度信息,确定所述第一显示单元的期望倾斜角度;至少根据所述期望倾斜角度确定所述容许夹角范围。所述期望倾斜角度的确定方法可参考上文的记载,在确定了所述期望倾斜角度之后,可结合考虑显示单元倾斜调节精度限制、对对象显示质量要求等因素,将期望倾斜角度在一定容许误差范围内的角度范围作为所述容许夹角范围。采用该方案确定的所述容许夹角范围较为合理,基于该容许夹角范围进行显示单元的倾斜控制,效率高且较易实现。
实际应用中,可根据所述容许夹角范围相对所述显示阵列的原平面对所述第一显示单元进行倾斜控制,使得所述第一显示单元相对所述显示阵列的原平面的倾斜角度落入所述容许夹角范围。
或者,也可根据所述深度分布子区与所述显示景深范围在深度方向上的相对分布,确定所述第一显示单元的倾斜方向;根据所述倾斜方向和所述容许倾斜角度范围相对所述显示阵列的原平面倾斜所述第一显示单元。所述第一显示单元的倾斜方向的确定方法可参见上文的记载。采用该方案可提高所述第一显示单元倾斜控制的效率,使得所述第一显示单元的倾斜控制尽快符合平均弥散圆的收敛条件。
结合本申请实施例提供的任一种技术方案,所述期望显示深度信息的确定方法非常灵活,本申请实施例对此并不限制。
可选地,所述至少根据所述显示景深范围确定所述第一对象的期望显示深度信息,包括:确定所述显示景深范围内的任一显示深度为所述第一对象的期望显示深度信息;如光场显示设备的显示景深范围为[Vclose,Vfar],可确定该显示景深范围内的某显示深度为所述第一对象的期望显示深度信息,即所所述第一对象各点的期望显示深度信息在实际应用中,可结合第一子透镜的焦距调节能力、所述内容中不同深度分布子区内对象的相对分布等一种或多种因素,确定所述显示景深范围内的某一较优选的显示深度为所述第一对象的期望显示深度信息,以作为所述第一子透镜倾斜控制的依据,由此提高方案实现的灵活性。
可选地,所述至少根据所述显示景深范围确定所述第一对象的期望显示深度信息,包括:根据所述深度分布子区与所述显示景深范围在深度方向上的相对分布,确定所述显示景深范围中靠近所述深度分布子区的一显示深度为所述第一对象的期望显示深度信息。所述“靠近”是个考虑了容许范围的相对概念,在实际应用中,可以光场显示设备当前的显示对焦面所在的深度位置Vfocus为参考进行所述期望显示深度信息的确定。例如:如果所述第一对象对应的深度分布子区相对所述显示景深范围位于深度较深的区域,则可确定[Vfocus,Vfar]范围内的某一显示深度(如在[Vfocus,Vfar]范围内尽可能接近Vfar的某一深度位置)为所述第一对象的期望显示深度信息;而如果所述第一对象对应的深度分布子区相对所述显示景深范围位于深度较浅的区域,则可确定[Vclose,Vfocus]范围内的某一显示深度(如在[Vclose,Vfocus]范围内尽可能接近Vclose的某一深度位置)为所述第一对象的期望显示深度信息。如此处理可尽可能保持所述内容不同深度分布的各对象之间的显示深度的相对关系,深度较深的对象相对深度较浅的对象的显示像距大,使得在提高显示成像清晰度的同时尽可能不削弱用户观看时的深度感,提升用户体验。
可选地,所述根据所述显示景深范围和所述深度分布子区,相对所述显示阵列的原平面倾斜所述第一显示单元之前,所述方法还包括:确定所述显示阵列中影响所述第一对象显示的显示单元为所述第一显示单元。采用该方案可在光场显示设备的显示阵列中确定出影响所述第一对象显示的一个或多个显示单元作为所述第一显示单元,之后通过对一个或多个所述第一显示单元进行倾斜控制,以改变经相应第一显示单元所显示的第一对象的显示像距,使之落入所述光场显示设备的显示景深范围,由此提高所述第一对象的显示质量。
进一步可选地,确定所述显示阵列中影响所述第一对象显示的显示单元为所述第一显示单元,包括:根据所述期望显示深度信息、所述观看对焦距离和人眼瞳孔尺寸确定所述第一显示单元。光场显示的某些情形下,显示阵列上的显示内容与用户经子透镜阵列所看到的虚像在内容上对应但图像表现形式不同,用户经子透镜阵列所看到的虚像通常和人眼在自然环境下观看的图像相符,而显示阵列上显示是多个子图像,每个显示单元显示一个子图像,每个子图像对应虚像的某一局部,不同子图像所表示的对象可能部分相同,例如,如果采用3倍角度采样进行光场显示(即用3×3个显示单元表示相同对象不同角度的显示信息),如鸟嘴等相同对象可能在9子图像中都有体现,可确定出显示这9个子图像的显示单元为待调节的第一显示单元,对所述第一显示单元进行倾斜控制以提高该对象成像的清晰度。例如,参考图2c,不妨以确定影响所述第一对象某点显示的第一显示单元为例进行说明所述第一显示单元的确定方法:
(a2)假设所述内容为一清晰的2D图像(所述2D图像经光场显示之后在空间显示为具有一定显示深度分布的3D图像),可根据所述2D图像的深度分布信息,确定其部分深度分布子区中的第一对象中的各点分别在所述2D图像中图像坐标{(xi,yi)},需要说明的是,确定各点的图像坐标可能集中分布也可能分散分布。以下不妨以所述第一对象中的某一点为例进行说明。
(b2)根据上述确定的某点的图像坐标,确定与该点对应的虚像点P的空间坐标p(x′i,y′i),其中,x′i=M1xi,y′i=M2yi,M为已知的缩放系数,如M1为已知的X方向的缩放系数,M2为已知的Y方向的缩放系数;
(c2)虚像点P可看作一虚拟光源,该虚拟光源所发出的光线要进入人眼,和虚拟光源距离人眼的距离以及人眼瞳孔的尺寸有关,而虚拟光源距离人眼的距离相当于虚像点P的显示深度,人眼瞳孔的直径可根据经验值或实验值或检测值预先获取,这两个信息确定之后,以虚像点P为顶点的光锥也相应确定,该光锥内的光线可进入人眼,因此,显示阵列与该光锥的截面所覆盖的显示单元所发出的光线,可视为可进入人眼,这些显示单元为影响该虚像点显示的显示单元,即第一显示单元。可选地,可根据公式(3)和(4)确定虚像点P沿垂直方向在显示阵列上的覆盖范围,进而根据该覆盖范围确定所述第一显示单元:
其中:
Yi2=Y-Yi1-y′i.........................................(7)
上述各公式:Y表示以虚像点P为虚拟光源到人眼瞳孔的光锥在显示阵列所在平面的截面在垂直方向上的覆盖范围;Yi1表示光锥与显示阵列的截面的上边界在垂直方向上距离平面2的距离,Yi2表示光锥与显示阵列的截面的下边界在垂直方向上距离平面1的距离,其中,平面1位穿过显示阵列中心且垂直显示阵列的平面,平面2为经过虚像点P且平行平面1的平面;ymin表示虚像点P沿垂直方向在显示阵列上的覆盖范围的最小坐标值;ymax表示虚像点P沿垂直方向在显示阵列上的覆盖范围的最大坐标值;dl表示显示阵列和子透镜阵列之间的距离;dv表示表示虚像距离子透镜阵列之间的距离,E表示瞳孔的直径。
(d2)根据覆盖范围以及显示阵列中各显示单元在垂直方向(Y轴)上的坐标位置信息,可确定所述覆盖范围对应的各显示单元。
(e2)同理,采用类似(c2)和(d2)的方法可根据覆盖范围以及显示阵列中各显示单元在水平方向(X轴)上的坐标位置信息,可确定所述覆盖范围对应的各显示单元。
对某一方向(如垂直方向或水平方向)确定的覆盖范围而言,如果覆盖范围与各显示单元在垂直方向的位置坐标完全重合,则可方便确定覆盖范围对应该方向(垂直方向或水平方向)坐标的显示单元为第一显示单元;如果覆盖范围的边缘部分未完全对应一完整的显示单元,则可采用近似处理方法确定所述第一显示单元,如确定所述覆盖范围只要局部覆盖的显示单元为所述第一显示单元,或者,所述覆盖范围仅全部覆盖的显示单元为所述第一显示单元,或者,所述覆盖范围和显示单元的坐标的重叠子范围满足一定比例的显示单元为所述第一显示单元,等等,确定方式非常灵活。
(二)另一种可选的实现方式中,可根据所述显示景深范围和所述深度分布子区,相对所述显示阵列的原平面倾斜所述第一显示单元以及相对所述子透镜阵列的原平面倾斜第一子透镜,以调整经所述第一显示单元和所述第一子透镜显示的第一对象的显示像距,进而提高所述第一对象的显示质量。
可选地,所述根据所述光场显示设备的显示景深范围和所述深度分布子区,相对所述显示阵列的原平面倾斜所述第一显示单元以及相对所述子透镜阵列的原平面倾斜第一子透镜,包括:根据所述显示景深范围和所述深度分布子区确定所述第一对象的期望显示深度信息;至少根据所述第一子透镜的焦距、所述期望显示深度信息和所述显示阵列和所述子透镜阵列之间的距离,确定所述第一显示单元的第一倾斜角度和所述第一子透镜的第二倾斜角度;根据所述第一倾斜角度相对所述显示阵列的原平面倾斜所述第一显示单元、以及根据所述第二倾斜角度相对所述子透镜阵列的原平面倾斜所述第一子透镜,以调整经所述第一显示单元和所述第一子透镜显示的第一对象的显示像距,进而提高所述第一对象的显示质量。所述期望显示深度信息的确定可参见上文的记载,不再赘述。
光场显示中,所述第一显示单元和所述第一子透镜分别倾斜之后,所述第一显示单元所在的平面与所述第一子透镜所在的平面可能不再平行。参考沙姆定律,当所述深度分布子区内的第一对象经所述第一显示单元和所述第一子透镜显示后所成的像的平面(即对象显示平面)的延长面、所述第一子透镜倾斜后所在平面的延长面、所述第一显示单元倾斜后所在平面的延长面,三者相交与一直线时,如图4所示,所述深度分布子区内的第一对象可获得清晰显示的区域最大。满足上述定律的所述第一显示单元的倾斜角度即为本申请实施例所述的第一倾斜角度,满足上述定律的所述第一子透镜的倾斜角度即为本申请实施例所述的第二倾斜角度。可选地,所述第一倾斜角度和所述第二倾斜角度可采用下式确定:
其中:α表示所述第一显示单元的第一倾斜角;β表示所述第一子透镜的第二倾斜角;f表示第一子透镜的焦距;表示所述对象显示平面和与所述显示阵列的原平面(或者所述第一显示单元倾斜前所在的平面)之间的夹角;v表示所述第一子透镜的光心沿所述子透镜阵列的原平面到所述第一显示单元的距离,例如所述第一子透镜倾斜前后的光心保持不变、所述第一显示单元倾斜前后的中心保持不变,则所述第一子透镜的光心和所述第一显示单元的中心之间的距离,即为所述第一子透镜的光心沿所述子透镜阵列的原平面到所述第一显示单元的距离;u表示所述第一子透镜的光心经垂直所述子透镜阵列的原平面(或者所述第一子透镜倾斜前所在的平面)的方向到所述对象显示平面的距离,,即为图中的子透镜阵列的原平面到显示阵列的原平面之间的距离dl。根据该方案确定的第一倾斜角和第二倾斜角分别倾斜所述第一显示单元和所述第一子透镜,提高了所述第一显示单元和所述第一子透镜倾斜控制的效率,且经倾斜后的所述第一显示单元和第一子透镜显示的所述第一对象可获得清晰成像的区域较大。此外,也可结合倾斜方向来提高倾斜控制效率。不妨以图4为例,调整前后的虚像点分别为P2和P2″,各自对应的显示距离满足dp2>dp2″,则可沿着增大所述第一子透镜与所述子透镜阵列的原平面之间的夹角、以及所述第一显示单元与所述显示阵列的原平面之间的夹角的方向,分别倾斜所述第一子透镜和所述第一显示单元;反之,可沿着减小所述第一子透镜与所述子透镜阵列的原平面之间的夹角、以及所述第一显示单元与所述显示阵列的原平面之间的夹角的方向,分别倾斜所述第一子透镜和所述第一显示单元;采用该方案可使得所述第一显示单元和所述第一子透镜的倾斜尽快满足收敛条件,由此提高倾斜控制效率。
进一步可选地,所述根据所述第一倾斜角度相对所述显示阵列的原平面倾斜所述第一显示单元、以及根据所述第二倾斜角度相对所述子透镜阵列的原平面倾斜所述第一子透镜之前,所述方法还包括:确定所述显示阵列中影响所述第一对象显示的显示单元为所述第一显示单元、以及所述子透镜阵列中影响所述第一对象显示的子透镜为所述第一子透镜。采用该方案可在光场显示设备的显示阵列中确定出影响所述第一对象显示的一个或多个显示单元作为所述第一显示单元、以及在子透镜阵列中确定出与所述第一显示单元对应的第一子透镜,并对确定出的所述第一显示单元和所述第一子透镜进行倾斜控制,以改变经所述第一显示单元和所述第一子透镜所显示的第一对象的显示像距,使之落入所述光场显示设备的显示景深范围,由此提高所述第一对象的显示质量。
进一步可选地,所述确定所述显示阵列中影响所述第一对象显示的显示单元为所述第一显示单元、以及所述子透镜阵列中影响所述第一对象显示的子透镜为所述第一子透镜,包括:根据所述期望显示深度信息、所述观看对焦距离和人眼瞳孔尺寸确定所述第一显示单元;根据所述显示阵列中的显示单元和所述子透镜阵列中的子透镜之间的对应关系,确定所述子透镜阵列中与所述第一显示单元对应的子透镜为所述第一子透镜。所述第一显示单元的具体确定方法可参见上文的记载。确定好所述第一显示单元之后,根据光场显示设备中显示阵列中的各显示单元和子透镜阵列中各子透镜之间的映射关系,可确定子透镜阵列中与所述第一显示单元对应的子透镜为待倾斜的所述第一子透镜。采用该方案确定影响所述深度分布子区内第一对象显示的第一显示单元和第一子透镜,方法简单易实现。
本领域技术人员可以理解,在本申请具体实施方式的上述任一方法中,各步骤的序号大小并不意味着执行顺序的先后,各步骤的执行顺序应以其功能和内在逻辑确定,而不应对本申请具体实施方式的实施过程构成任何限定。
图5为本申请实施例提供的第一种光场显示控制装置的逻辑框图。如图5所示,本申请实施例提供的光场显示控制装置可包括:一深度分布子区确定模块51和一倾斜控制模块52。
深度分布子区确定模块51用于根据光场显示设备的显示景深范围和内容的深度分布信息,确定所述内容的至少一深度分布子区,所述至少一深度分布子区中每个深度分布子区位于所述显示景深范围之外。
倾斜控制模块52用于根据所述光场显示设备的显示景深范围和所述深度分布子区,至少相对光场显示设备的显示阵列的原平面倾斜第一显示单元,其中,所述第一显示单元为所述显示阵列中影响第一对象显示的显示单元,所述第一对象为所述内容位于所述深度分布子区内的部分。
本申请实施例提供的技术方案根据所述光场显示设备当前的显示景深范围和待需要进行像质量控制的深度分布子区,至少相对显示阵列原平面倾斜第一显示单元,以至少通过对第一显示单元的倾斜控制来改变所述第一对象在空间中的显示像距,使得所述第一对象经所述第一子透镜显示后所成的虚像的平均显示像距尽可能分布在所述光场显示设备当前的显示景深范围内,由此提高至少经倾斜后的第一显示单元所显示的所述第一对象的显示质量。该方案在原有显示景深范围内清晰成像的基础上,充分利用至少倾斜显示单元的控制手段来提高所述显示景深范围之外的至少一深度分布子区内的对象的显示质量,效果上一定程度上相当于用户可看清比原显示景深范围更广的深度范围的对象,并且该显示质量调整过程无需对光场源内容的繁琐计算,通过调整相应子透镜的焦距即可对原显示景深范围之外的对象的显示质量进行调整,方案简单,便于控制。此外,本申请在光场显示设备现有显示像素资源的基础上,为某些情形下受限于显示像素资源而无法清晰显示的部分深度分布子区内的对象的清晰显示提供了技术手段,方案简单,便于控制。
所述光场显示控制装置可在但不限于涉及图像呈现、视频播放等应用过程中通过执行该光场显示控制方法进行图像的显示控制。所述光场显示控制装置的设备表现形式不受限制,例如所述光场显示控制装置可为某一独立的部件,该部件与光场显示设备配合通信;或者,所述光场显示控制装置可作为某一功能模块集成在光场显示设备中,所述光场显示设备可包括但不限于具有光场显示能力的电子设备,例如所述光场显示设备可包括但不限于近眼光场显示设备,所述近眼光场显示设备可包括但不限于智能头盔、智能眼镜等。
可选地,至少经倾斜后的所述第一显示单元显示的所述第一对象在所述光场显示设备的第一显示平面的平均弥散圆,小于或等于一容许弥散圆,其中,所述第一显示平面为在深度方向上与一观看对焦距离对应且垂直深度方向的一显示平面。该方案可将平均弥散圆在第一显示平面上减小作为倾斜部件(如所述第一显示单元或者所述第一显示单元和所述第一子透镜)倾斜控制的收敛条件,提高倾斜部件倾斜控制的效率和针对性。
可选地,所述至少一深度分布子区的至少之一和所述显示景深范围深度连续变化。该方案有利于提高正在显示或待显示的所述内容中位于所述显示景深范围周边的对象的显示质量,从用户观看的效果上来看,一定程度上相当于用户可看清比原显示景深范围更广的深度范围的对象。
可选地,所述至少一深度分布子区的至少之一和所述显示景深范围深度非连续变化。该方案有利于提高正在显示或待显示的所述内容中位于所述显示景深范围之外的对象的显示质量,从用户观看的效果上,一定程度上相当于用户可看清比原显示景深范围更广的深度范围的对象。
一种可选的实现方式中,如图6所示,所述倾斜控制模块52包括:一第一倾斜控制子模块521。第一倾斜控制子模块521用于根据所述显示景深范围和所述深度分布子区,相对所述显示阵列的原平面倾斜所述第一显示单元。该方案通过倾斜所述第一显示单元,来调整经所述第一显示单元显示的第一对象的显示像距,进而提高所述第一对象的显示质量。
进一步可选地,所述第一倾斜控制子模块521包括:一第一期望显示深度信息确定单元5211、一第一期望倾斜角度确定单元5212和一第一倾斜单元5213。第一期望显示深度信息确定单元5211用于根据所述显示景深范围和所述深度分布子区确定所述第一对象的期望显示深度信息;第一期望倾斜角度确定单元5212用于至少根据所述第一子透镜的焦距和所述期望显示深度信息,确定所述第一显示单元的期望倾斜角度;第一倾斜单元5213用于至少根据所述期望倾斜角度相对所述显示阵列的原平面倾斜所述第一显示单元。所述第一期望显示深度信息确定单元确定第一对象的期望显示深度信息的方法可参见上文方法实施例的记载,不再赘述。该方案提高了所述第一显示单元倾斜控制的效率,且经倾斜后的所述第一显示单元和与之对应的第一子透镜所显示的所述第一对象可获得清晰成像的区域较大。
可选地,所述第一倾斜单元5213包括:一第一倾斜方向子单元52131和一第一倾斜子单元52132。第一倾斜方向子单元52131用于根据所述深度分布子区与所述显示景深范围在深度方向上的相对分布,确定所述第一显示单元的倾斜方向;第一倾斜子单元52132用于根据所述倾斜方向和所述期望倾斜角度相对所述显示阵列的原平面倾斜所述第一显示单元。该方案可在所述第一显示单元的倾斜控制过程中尽快满足相应平均弥散圆的收敛条件,提高所述第一显示单元的倾斜控制效率。
可选地,所述第一倾斜控制子模块521包括:一第二期望显示深度信息确定单元5214、一容许倾斜角度范围确定单元5215和一第二倾斜控制单元5216。第二期望显示深度信息确定单元5214用于根据所述显示景深范围和所述深度分布子区确定所述第一对象的期望显示深度信息;容许倾斜角度范围确定单元5215用于至少根据所述期望显示深度信息,确定所述第一显示单元的容许倾斜角度范围;第二倾斜控制单元5216用于至少根据所述容许倾斜角度范围相对所述显示阵列的原平面倾斜所述第一显示单元。所述第二期望显示深度信息确定单元确定所述第一对象的期望显示深度信息的方法可参见上文方法实施例的记载,不再赘述。该方案提高了第一显示单元倾斜控制的效率,且可提高经倾斜后的所述第一显示单元和与其对应的第一子透镜显示的所述第一对象的清晰度。
可选地,所述容许倾斜角度范围确定单元5215包括:一期望倾斜角度确定子单元52151和一容许夹角范围确定子单元52152。期望倾斜角度确定子单元52151用于至少根据所述第一子透镜的焦距和所述期望显示深度信息,确定所述第一显示单元的期望倾斜角度;容许夹角范围确定子单元52152用于至少根据所述期望倾斜角度确定所述容许夹角范围。采用该方案确定的所述容许夹角范围较为合理,基于该容许夹角范围进行显示单元的倾斜控制,效率高且较易实现。
可选地,所述第二倾斜控制单元5216包括:一第二倾斜方向确定子单元52161和一第二倾斜控制子单元52162。第二倾斜方向确定子单元52161用于根据所述深度分布子区与所述显示景深范围在深度方向上的相对分布,确定所述第一显示单元的倾斜方向;第二倾斜控制子单元52162用于根据所述倾斜方向和所述容许倾斜角度范围相对所述显示阵列的原平面倾斜所述第一显示单元。采用该方案可提高所述第一显示单元倾斜控制的效率,使得所述第一显示单元的倾斜控制尽快符合平均弥散圆的收敛条件。
可选地,所述装置还包括:一第一倾斜部件确定模块53。第一倾斜部件确定模块53确定所述显示阵列中影响所述第一对象显示的显示单元为所述第一显示单元。采用该方案可在光场显示设备的显示阵列中确定出影响所述第一对象显示的一个或多个显示单元作为所述第一显示单元,之后通过对一个或多个所述第一显示单元进行倾斜控制,以改变经相应第一显示单元所显示的第一对象的显示像距,使之落入所述光场显示设备的显示景深范围,由此提高所述第一对象的显示质量。
进一步可选地,所述第一倾斜部件确定模块53包括:一第一倾斜部件确定子模块531。第一倾斜部件确定子模块531用于根据所述期望显示深度信息、所述观看对焦距离和人眼瞳孔尺寸确定所述第一显示单元。采用该方案确定所述第一显示单元,方案简单易实现。
另一种可选的实现方式中,如图7所示,所述倾斜控制模块52包括:一第二倾斜控制子模块522。第二倾斜控制子模块522用于根据所述光场显示设备的显示景深范围和所述深度分布子区,相对所述显示阵列的原平面倾斜所述第一显示单元以及相对所述子透镜阵列的原平面倾斜第一子透镜,其中,所述第一子透镜为所述光场显示设备中影响所述第一对象显示的子透镜。该方案通过倾斜所述第一显示单元和与之对应的第一子透镜,来调整经所述第一显示单元和所述第一子透镜显示的第一对象的显示像距,进而提高所述第一对象的显示质量。采用该方案可提高所述第一显示单元倾斜控制的效率,使得所述第一显示单元的倾斜控制尽快符合平均弥散圆的收敛条件。
可选地,所述第二倾斜控制子模块522包括:一第三期望显示深度信息确定单元5221、一倾斜角度确定单元5222和一第三倾斜控制单元5223。第三期望显示深度信息确定单元5221用于根据所述显示景深范围和所述深度分布子区确定所述第一对象的期望显示深度信息;倾斜角度确定单元5222用于至少根据所述第一子透镜的焦距、所述期望显示深度信息和所述显示阵列和所述子透镜阵列之间的距离,确定所述第一显示单元的第一倾斜角度和所述第一子透镜的第二倾斜角度;第三倾斜控制单元5223用于根据所述第一倾斜角度相对所述显示阵列的原平面倾斜所述第一显示单元、以及根据所述第二倾斜角度相对所述子透镜阵列的原平面倾斜所述第一子透镜。所述第三期望显示深度信息确定单元确定所述第一对象的期望显示深度信息的方法可参见上文方法实施例的记载,不再赘述。采用该方案可在光场显示设备的显示阵列中确定出影响所述第一对象显示的一个或多个显示单元作为所述第一显示单元、以及在子透镜阵列中确定出与所述第一显示单元对应的第一子透镜,并对确定出的所述第一显示单元和所述第一子透镜进行倾斜控制,以改变经所述第一显示单元和所述第一子透镜所显示的第一对象的显示像距,使之落入所述光场显示设备的显示景深范围,由此提高所述第一对象的显示质量。
进一步可选地,所述装置还包括:一显示单元确定模块54和一子透镜确定模块55。显示单元确定模块54用于根据所述期望显示深度信息、所述观看对焦距离和人眼瞳孔尺寸确定所述第一显示单元;子透镜确定模块55用于根据所述显示阵列中的显示单元和所述子透镜阵列中的子透镜之间的对应关系,确定所述子透镜阵列中与所述第一显示单元对应的子透镜为所述第一子透镜。采用该方案确定影响所述深度分布子区内第一对象显示的第一显示单元和第一子透镜,方法简单易实现。
图8为本申请实施例提供的第四种光场显示控制装置的结构框图,本申请具体实施例并不对光场显示控制装置800的具体实现方式做限定。如图8所示,光场显示控制装置800可以包括:
处理器(Processor)810、通信接口(Communications Interface)820、存储器(Memory)830、以及通信总线840。其中:
处理器810、通信接口820、以及存储器830通过通信总线840完成相互间的通信。
通信接口820,用于与比如具有通信功能的设备、外部光源等通信。
处理器810,用于执行程序832,具体可以执行上述任一光场显示控制方法实施例中的相关步骤。
例如,程序832可以包括程序代码,所述程序代码包括计算机操作指令。
处理器810可能是一个中央处理器(Central Processing Unit,简称CPU),或者是特定集成电路(Application Specific Integrated Circuit,简称ASIC),或者是被配置成实施本申请实施例的一个或多个集成电路。
存储器830,用于存放程序832。存储器830可能包含随机存取存储器(RandomAccess Memory,简称RAM),也可能还包括非易失性存储器(Non-volatile memory),例如至少一个磁盘存储器。
例如,在一种可选的实现方式中,处理器810通过执行程序832可执行以下步骤:至少根据内容的深度分布信息确定所述内容的部分深度分布子区;根据所述光场显示设备的显示景深范围和所述深度分布子区,至少相对光场显示设备的显示阵列的原平面倾斜第一显示单元,其中,所述第一显示单元为所述显示阵列中影响第一对象显示的显示单元,所述第一对象为所述内容位于所述深度分布子区内的部分。
在其他可选的实现方式中,处理器810通过执行程序832还可执行上述其他任一实施例提及的步骤,在此不再赘述。
程序832中各步骤的具体实现可以参见上述实施例中的相应步骤、模块、子模块、单元中对应的描述,在此不再赘述。所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的设备和模块的具体工作过程,可以参考前述方法实施例中的对应过程描述,在此不再赘述。
本申请实施例还提供了一种光场显示设备,如图9所示,所述光场显示设备包括:一显示阵列、一子透镜阵列和一光场显示控制装置;所述显示阵列包括阵列分布的多个可相对所述显示阵列的原平面倾斜的显示单元;所述子透镜阵列包括阵列分布的多个子透镜;所述显示阵列和所述子透镜阵列紧邻设置(即显示阵列和子透镜阵列之间的距离很小,通常小于子透镜阵列中子透镜的最大焦距),所述光场显示控制装置分别与所述显示阵列和所述子透镜阵列连接,对一个或多个显示单元进行倾斜控制以提高局部显示清晰度。
进一步可选地,所述子透镜阵列中多个子透镜可相对所述子透镜阵列的原平面倾斜,且所述光场显示控制装置分别与所述显示阵列和所述子透镜阵列连接,对一个或多个显示单元和与其对应的子透镜进行倾斜控制以提高局部显示清晰度。
所述光场显示控制装置可为本申请实施例提供的任一种光场显示控制装置,其可在但不限于涉及图像呈现、视频播放等应用过程中通过执行本申请实施例提供的任一种光场显示控制方法进行图像的显示控制。所述光场显示设备进行光场显示控制的原理和装置结构,可参见本申请其他实施例的记载,不在赘述。
在本申请上述各实施例中,实施例的序号和/或先后顺序仅仅便于描述,不代表实施例的优劣。对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。有关装置、设备或系统实施例的实施原理或过程的相关描述,可参见相应方法实施例的记载,在此不再赘述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及方法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
在本申请的装置、方法、系统等实施例中,显然,各部件(系统、子系统、模块、子模块、单元、子单元等)或各步骤是可以分解、组合和/或分解后重新组合的。这些分解和/或重新组合应视为本申请的等效方案。同时,在上面对本申请具体实施例的描述中,针对一种实施方式描述和/或示出的特征可以以相同或类似的方式在一个或更多个其它实施方式中使用,与其它实施方式中的特征相组合,或替代其它实施方式中的特征。
应该强调,术语“包括/包含”在本文使用时指特征、要素、步骤或组件的存在,但并不排除一个或更多个其它特征、要素、步骤或组件的存在或附加。
最后应说明的是:以上实施方式仅用于说明本申请,而并非对本申请的限制,有关技术领域的普通技术人员,在不脱离本申请的精神和范围的情况下,还可以做出各种变化和变型,因此所有等同的技术方案也属于本申请的范畴,本申请的专利保护范围应由权利要求限定。

Claims (10)

1.一种光场显示控制方法,其特征在于,包括:
根据光场显示设备的显示景深范围和内容的深度分布信息,确定所述内容的至少一深度分布子区,所述至少一深度分布子区中每个深度分布子区位于所述显示景深范围之外;
根据所述光场显示设备的显示景深范围和所述深度分布子区,至少相对光场显示设备的显示阵列的原平面倾斜第一显示单元,其中,所述第一显示单元为所述显示阵列中影响第一对象显示的显示单元,所述第一对象为所述内容位于所述深度分布子区内的部分。
2.根据权利要求1所述的方法,其特征在于,至少经倾斜后的所述第一显示单元显示的所述第一对象在所述光场显示设备的第一显示平面的平均弥散圆,小于或等于一容许弥散圆,其中,所述第一显示平面为在深度方向上与一观看对焦距离对应且垂直深度方向的一显示平面。
3.根据权利要求1或2所述的方法,其特征在于,所述至少一深度分布子区的至少之一和所述显示景深范围深度连续变化。
4.根据权利要求1或2所述的方法,其特征在于,所述至少一深度分布子区的至少之一和所述显示景深范围深度非连续变化。
5.根据权利要求1所述的方法,其特征在于,所述根据所述光场显示设备的显示景深范围和所述深度分布子区,至少相对所述显示阵列的原平面倾斜第一显示单元,包括:
根据所述显示景深范围和所述深度分布子区,相对所述显示阵列的原平面倾斜所述第一显示单元。
6.一种光场显示控制装置,其特征在于,包括:
一深度分布子区确定模块,用于根据光场显示设备的显示景深范围和内容的深度分布信息,确定所述内容的至少一深度分布子区,所述至少一深度分布子区中每个深度分布子区位于所述显示景深范围之外;
一倾斜控制模块,用于根据所述光场显示设备的显示景深范围和所述深度分布子区,至少相对光场显示设备的显示阵列的原平面倾斜第一显示单元,其中,所述第一显示单元为所述显示阵列中影响第一对象显示的显示单元,所述第一对象为所述内容位于所述深度分布子区内的部分。
7.根据权利要求6所述的装置,其特征在于,至少经倾斜后的所述第一显示单元显示的所述第一对象在所述光场显示设备的第一显示平面的平均弥散圆,小于或等于一容许弥散圆,其中,所述第一显示平面为在深度方向上与一观看对焦距离对应且垂直深度方向的一显示平面。
8.根据权利要求6或7所述的装置,其特征在于,所述至少一深度分布子区的至少之一和所述显示景深范围深度连续变化。
9.一种光场显示控制装置,其特征在于,包括:一处理器、一通信接口、一存储器以及一通信总线;所述处理器、所述通信接口以及所述存储器通过所述通信总线完成相互间的通信;
所述存储器用于存放至少一指令;所述指令使所述处理器执行以下操作:
根据光场显示设备的显示景深范围和内容的深度分布信息,确定所述内容的至少一深度分布子区,所述至少一深度分布子区中每个深度分布子区位于所述显示景深范围之外;
根据所述光场显示设备的显示景深范围和所述深度分布子区,相对光场显示设备的显示阵列的原平面至少倾斜第一显示单元,其中,所述第一显示单元为所述显示阵列中影响第一对象显示的显示单元,所述第一对象为所述内容位于所述深度分布子区内的部分。
10.一种光场显示设备,其特征在于,包括:
一显示阵列,包括阵列分布的多个可相对所述显示阵列的原平面倾斜的显示单元;
一子透镜阵列,包括阵列分布的多个子透镜;
所述显示阵列和所述子透镜阵列紧邻设置;
一如权利要求6-9任一所述的光场显示控制装置,所述光场显示控制装置分别与所述显示阵列和所述子透镜阵列连接。
CN201610029157.6A 2016-01-18 2016-01-18 光场显示控制方法和装置、光场显示设备 Active CN106254804B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201610029157.6A CN106254804B (zh) 2016-01-18 2016-01-18 光场显示控制方法和装置、光场显示设备
US15/398,370 US10698230B2 (en) 2016-01-18 2017-01-04 Light field display control method and apparatus, and light field display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610029157.6A CN106254804B (zh) 2016-01-18 2016-01-18 光场显示控制方法和装置、光场显示设备

Publications (2)

Publication Number Publication Date
CN106254804A CN106254804A (zh) 2016-12-21
CN106254804B true CN106254804B (zh) 2019-03-29

Family

ID=57626797

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610029157.6A Active CN106254804B (zh) 2016-01-18 2016-01-18 光场显示控制方法和装置、光场显示设备

Country Status (2)

Country Link
US (1) US10698230B2 (zh)
CN (1) CN106254804B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170212361A1 (en) * 2016-01-25 2017-07-27 Terrence A. Staton Optimal Focusing Design for High Field of View Head Mount Displays
CN109672873B (zh) * 2017-10-13 2021-06-29 中强光电股份有限公司 光场显示设备及其光场影像的显示方法
CN109991751B (zh) * 2017-12-29 2021-05-11 中强光电股份有限公司 光场显示装置与方法
US11156828B1 (en) * 2018-07-05 2021-10-26 Facebook Technologies, Llc Light field display tilting

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101040206A (zh) * 2004-10-13 2007-09-19 皇家飞利浦电子股份有限公司 一种立体显示设备
CN103353667A (zh) * 2013-06-28 2013-10-16 北京智谷睿拓技术服务有限公司 成像调整设备及方法
CN104038690A (zh) * 2013-03-05 2014-09-10 佳能株式会社 图像处理装置、图像拍摄装置及图像处理方法
EP2913992A3 (en) * 2014-02-28 2015-10-14 Ricoh Company, Ltd. Image capturing apparatus, image capturing system, and image capturing method

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8754829B2 (en) * 2012-08-04 2014-06-17 Paul Lapstun Scanning light field camera and display
DK3075150T3 (da) * 2013-11-25 2022-09-12 Tesseland Llc Immersive kompakte displayglas

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101040206A (zh) * 2004-10-13 2007-09-19 皇家飞利浦电子股份有限公司 一种立体显示设备
CN104038690A (zh) * 2013-03-05 2014-09-10 佳能株式会社 图像处理装置、图像拍摄装置及图像处理方法
CN103353667A (zh) * 2013-06-28 2013-10-16 北京智谷睿拓技术服务有限公司 成像调整设备及方法
EP2913992A3 (en) * 2014-02-28 2015-10-14 Ricoh Company, Ltd. Image capturing apparatus, image capturing system, and image capturing method

Also Published As

Publication number Publication date
US10698230B2 (en) 2020-06-30
CN106254804A (zh) 2016-12-21
US20170208317A1 (en) 2017-07-20

Similar Documents

Publication Publication Date Title
CN106254859B (zh) 光场显示控制方法和装置、光场显示设备
CN106375694B (zh) 光场显示控制方法和装置、光场显示设备
CN106254857B (zh) 光场显示控制方法和装置、光场显示设备
CN104410784B (zh) 光场采集控制方法和装置
CN106254804B (zh) 光场显示控制方法和装置、光场显示设备
CN106254753B (zh) 光场显示控制方法和装置、光场显示设备
CN108230234B (zh) 图像虚化处理方法、装置、存储介质及电子设备
JP2021518701A (ja) Dibrシステムにおいて立体的視点を生じさせるための、多焦点面ベースの方法(mfp−dibr)
KR20170097068A (ko) 광학 렌즈들의 복제 효과들
CN109803133B (zh) 一种图像处理方法及装置、显示装置
WO2021238423A1 (zh) 图像处理方法、近眼显示设备、计算机设备和存储介质
CN106161922B (zh) 图像采集控制方法和装置
CN106291953B (zh) 显示控制方法和装置
KR100514241B1 (ko) 안경렌즈의 양안 성능 평가방법, 그 성능의 표시방법과,표시장치
JP3919097B2 (ja) 眼鏡レンズの両眼視性能表示方法及びその装置
JP2012066002A (ja) 眼鏡の視野画像表示装置
CN106375651B (zh) 对焦方法和装置、图像采集设备
CN106254858B (zh) 光场显示控制方法和装置、光场显示设备
CN106303208B (zh) 图像采集控制方法和装置
CN106254750B (zh) 图像采集控制方法和装置
CN106303209B (zh) 图像采集控制方法和装置
CN107707807B (zh) 图像采集控制方法和装置
CN106162153B (zh) 显示控制方法和装置
EP1330785A2 (en) Dynamic depth-of-field emulation based on eye-tracking
CN106303210B (zh) 图像采集控制方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant