CN113741162B - 图像投射方法和系统 - Google Patents

图像投射方法和系统 Download PDF

Info

Publication number
CN113741162B
CN113741162B CN202111038005.XA CN202111038005A CN113741162B CN 113741162 B CN113741162 B CN 113741162B CN 202111038005 A CN202111038005 A CN 202111038005A CN 113741162 B CN113741162 B CN 113741162B
Authority
CN
China
Prior art keywords
grating
sub
projection light
virtual scene
light source
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111038005.XA
Other languages
English (en)
Other versions
CN113741162A (zh
Inventor
龚江涛
张柳新
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN202111038005.XA priority Critical patent/CN113741162B/zh
Publication of CN113741162A publication Critical patent/CN113741162A/zh
Priority to US17/654,277 priority patent/US20230076136A1/en
Priority to GB2205437.3A priority patent/GB2610463A/en
Application granted granted Critical
Publication of CN113741162B publication Critical patent/CN113741162B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22—Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2294—Addressing the hologram to an active spatial light modulator
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22—Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2202—Reconstruction geometries or arrangements
    • G03H1/2205—Reconstruction geometries or arrangements using downstream optical component
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/18—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 for optical projection, e.g. combination of mirror and condenser and objective
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/42—Diffraction optics, i.e. systems including a diffractive element being designed for providing a diffractive effect
    • G02B27/4205—Diffraction optics, i.e. systems including a diffractive element being designed for providing a diffractive effect having a diffractive optical element [DOE] contributing to image formation, e.g. whereby modulation transfer function MTF or optical aberrations are relevant
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/42—Diffraction optics, i.e. systems including a diffractive element being designed for providing a diffractive effect
    • G02B27/4272—Diffraction optics, i.e. systems including a diffractive element being designed for providing a diffractive effect having plural diffractive elements positioned sequentially along the optical path
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/30—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving parallax barriers
    • G02B30/31—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving parallax barriers involving active parallax barriers
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00—Optical elements other than lenses
    • G02B5/18—Diffraction gratings
    • G02B5/1828—Diffraction gratings having means for producing variable diffraction
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00—Optical elements other than lenses
    • G02B5/18—Diffraction gratings
    • G02B5/1842—Gratings for image generation
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00—Projectors or projection-type viewers; Accessories therefor
    • G03B21/54—Accessories
    • G03B21/56—Projection screens
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00—Projectors or projection-type viewers; Accessories therefor
    • G03B21/54—Accessories
    • G03B21/56—Projection screens
    • G03B21/60—Projection screens characterised by the nature of the surface
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00—Projectors or projection-type viewers; Accessories therefor
    • G03B21/54—Accessories
    • G03B21/56—Projection screens
    • G03B21/60—Projection screens characterised by the nature of the surface
    • G03B21/604—Polarised screens
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/207—Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • H04N13/225—Image signal generators using stereoscopic image cameras using a single 2D image sensor using parallax barriers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/282—Image signal generators for generating image signals corresponding to three or more geometrical viewpoints, e.g. multi-view systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/31—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using parallax barriers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/349—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B2207/00—Coding scheme for general features or characteristics of optical elements and systems of subclass G02B, but not including elements and systems which would be classified in G02B6/00 and subgroups
    • G02B2207/123—Optical louvre elements, e.g. for directional light blocking
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00—Projectors or projection-type viewers; Accessories therefor
    • G03B21/54—Accessories
    • G03B21/56—Projection screens
    • G03B21/60—Projection screens characterised by the nature of the surface
    • G03B21/62—Translucent screens
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/0005—Adaptation of holography to specific applications
    • G03H2001/0088—Adaptation of holography to specific applications for video-holography, i.e. integrating hologram acquisition, transmission and display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/363—Image reproducers using image projection screens
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N2013/40—Privacy aspects, i.e. devices showing different images to different viewers, the images not being viewpoints of the same scene

Abstract

本申请提供了一种图像投射方法和系统，该系统包括：控制设备，以及与控制设备相连的透明全息显示屏、第一衍射光栅、第二衍射光栅及多个投射光源；透明全息显示屏的两个显示面叠加有衍射光栅；控制设备控制多个投射光源中至少一个第一投射光源向透明全息显示屏的第一显示面投射第一虚拟场景图像，向透明全息显示屏的第二显示面叠加的第二衍射光栅输出第一电调控信号，第一电调控信号用于控制第二衍射光栅中处于至少一个第一投射光源的光投射区域内的至少一个第一子光栅区处于不透光状态，使得第一子光栅区遮挡至少一个第一投射光源投射出的第一虚拟场景图像，以使得第一虚拟场景图像在第二显示面不可见。

Description

图像投射方法和系统
技术领域
本申请涉及显示技术领域，更具体地说，涉及一种图像投射方法和系统。
背景技术
混合现实以及增强现实等技术的应用场景日益增多。
在混合现实以及增强现实等场景中，虚拟对象和真实对象均会同时存在，而且不同位置用户所看到的虚拟场景是相同的，使得混合现实场景中呈现虚拟场景图像的方式较为单一，灵活性较差。
发明内容
本申请提供了一种图像投射方法和系统。
其中，一种图像投射系统，包括：控制设备、透明全息显示屏、第一衍射光栅、第二衍射光栅以及多个投射光源；
其中，所述透明全息显示屏、第一衍射光栅、第二衍射光栅以及所述投射光源均与所述控制设备相连；
所述透明全息显示屏的第一显示面叠加有所述第一衍射光栅；
所述透明全息显示屏的第二显示面叠加有所述第二衍射光栅；
所述投射光源为设置于所述透明全息显示屏外且朝向所述透明全息显示屏的投射光源，或者是设置于所述透明全息显示屏内的投射光源；
所述控制设备控制所述多个投射光源中至少一个第一投射光源向所述透明全息显示屏的第一显示面投射第一虚拟场景图像，向所述第二衍射光栅输出第一电调控信号，所述第一电调控信号用于控制所述第二衍射光栅中处于所述至少一个第一投射光源的光投射区域内的至少一个第一子光栅区处于不透光状态，使得所述第一子光栅区遮挡所述至少一个第一投射光源投射出的第一虚拟场景图像，以使得第一虚拟场景图像在所述第二显示面不可见。
在一种可能的实现方式中，该图像投射系统还包括：至少一个人眼追踪器；
所述人眼追踪器与所述控制设备相连；
所述人眼追踪器采集用户的眼睛定位数据，所述用户的眼睛定位数据用于定位所述用户的人眼位置；
所述控制设备控制所述多个投影光源中至少一个第二投射光源向所述第二显示面投射第二虚拟场景图像，向所述第二衍射光栅发送第二电调控信号，所述第二电调控信号用于控制所述第二衍射光栅中处于所述至少一个第二投射光源到目标用户的人眼位置的光传播路径上的至少一个第二光栅子区域的衍射参数，使得所述至少一个第二投射光源投射出的第二虚拟场景图像经所述至少一个第二光栅子区域仅投射至所述目标用户的人眼，所述目标用户为位于所述透明全息显示屏的第二显示面一侧的用户。
在又一种可能的实现方式中，该图像投射系统还包括：至少一个交互感应器；
所述交互感应器设置于所述透明全息显示屏外，与所述控制设备相连；
或者，所述交互感应器为设置于所述透明全息显示屏上的触摸感应单元，经所述透明全息显示屏与所述控制设备相连；
所述交互感应器采集第一用户向所述第一显示面输入的输入操作数据，将所述输入操作数据传输给所述控制设备，所述第一用户为位于所述透明全息显示屏的第一显示面一侧的用户；
所述控制设备还用于，按照所述输入操作数据确定所述第一用户选择的所述目标用户，所述目标用户属于所述位于所述透明全息显示屏的第二显示面一侧的至少一个第二用户。
在又一种可能的实现方式中，所述第一衍射光栅和第二衍射光栅为光栅间距可调的衍射光栅；
第二衍射光栅基于所述第一电控信号，缩小第一子光栅区的光栅间距直至所述第一子光栅区处于遮光状态；基于所述第二电控信号调整所述第二子光栅区的光栅间距，使得第二子光栅区具备将第二虚拟场景图像投射至所述目标用户的人眼所需的衍射参数。
在又一种可能的实现方式中，所述第一衍射光栅和第二衍射光栅为衍射系数可控的衍射光栅；
所述第一电控信号用于控制所述第二衍射光栅中的至少一个第一子光栅区的衍射系数为不透光状态对应的衍射系数；
所述第二电控信号用于控制所述第二衍射光栅中至少一个第二光栅子区域的衍射系数为目标衍射系数；
所述第二衍射光栅的至少一个第二衍射子区域具有目标衍射系数，使得所述至少一个第二衍射子区域能将第二虚拟场景图像投射至所述目标用户的人眼。
又一方面，本申请还提供了一种图像投射方法，包括：
确定待向透明全息显示屏的第一显示面投射的第一虚拟场景图像，所述透明全息显示屏具有第一显示面和第二显示面，所述第一显示面叠加有第一衍射光栅，所述第二显示面叠加有第二衍射光栅；
控制所述多个投射光源中至少一个第一投射光源向所述第一显示面投射第一虚拟场景图像；
向所述第二衍射光栅输出第一电调控信号，所述第一电调控信号用于控制所述第二衍射光栅中处于所述至少一个第一投射光源的光投射区域内的至少一个第一子光栅区处于不透光状态，使得所述第一子光栅区遮挡所述至少一个第一投射光源投射出的第一虚拟场景图像，以使得第一虚拟场景图像在所述第二显示面不可见。
在一种可能的实现方式中，图像投射方法还包括：
确定位于所述透明全息显示屏的第二显示面一侧的目标用户；
控制所述多个投影光源中至少一个第二投射光源向所述第二显示面投射第二虚拟场景图像；
向所述第二衍射光栅发送第二电调控信号，所述第二电调控信号用于控制所述第二衍射光栅中处于所述至少一个第二投射光源到所述目标用户的人眼位置的光传播路径上的至少一个第二光栅子区域的衍射参数，使得所述至少一个第二投射光源投射出的第二虚拟场景图像经所述至少一个第二光栅子区域仅投射至所述目标用户的人眼。
在又一种可能的实现方式中，所述确定位于所述透明全息显示屏的第二显示面一侧的目标用户，包括：
获得第一用户在所述第一显示面输入的输入操作，所述第一用户为位于所述透明全息显示屏的第一显示面一侧的用户；
基于所述输入操作在所述第一显示面上的输入位置以及位于所述第二显示面一侧的至少一个第二用户的位置，确定所述输入操作所针对的目标用户。
在又一种可能的实现方式中，在所述向所述第二衍射光栅发送第二电调控信号之前，还包括：
获得所述目标用户的左眼位置和右眼位置；
所述控制所述多个投影光源中至少一个第二投射光源向所述第二显示面投射第二虚拟场景图像，包括：
确定待向所述目标用户呈现的第二虚拟场景图像；
基于所述第二虚拟场景图像，确定待投射至所述目标用户的左眼的第一子虚拟场景图像和待投射至所述目标用户的右眼的第二子虚拟场景图像；
基于所述目标用户的左眼位置，确定将所述第一子虚拟场景图像投射至所述目标用户的左眼所需的至少一个第三投射光源；
基于所述目标用户的右眼位置，确定将所述第二子虚拟场景图像投射至所述目标用户的右眼所需的至少一个第四投射光源；
控制所述至少一个第三投射光源向所述第二显示面投射第一子虚拟场景图像，控制所述至少一个第四投射光源向所述第二显示面投射第二子虚拟场景图像，以向所述目标用户呈现出由所述第一子虚拟场景图像和第二子虚拟场景图像叠加出的所述第二虚拟场景图像；
所述向所述第二衍射光栅发送第二电调控信号，包括：
向所述第二衍射光栅发送第一电调控子信号，所述第一电调控子信号用于控制所述第二衍射光栅中处于所述至少一个第三投射光源到所述目标用户的左眼位置的光传播路径上的至少一个第三光栅子区域具有第一衍射参数，使得所述至少一个第三投射光源投射出的第一子虚拟场景图像经所述至少一个第三光栅子区域仅投射至所述目标用户的左眼；
向所述第二衍射光栅发送第二电调控子信号，所述第二电调控子信号用于控制所述第二衍射光栅中处于所述至少一个第四投射光源到所述目标用户的右眼位置的光传播路径上的至少一个第四光栅子区域具有第二衍射参数，使得所述至少一个第四投射光源投射出的第二子虚拟场景图像经所述至少一个第四光栅子区域仅投射至所述目标用户的右眼。
在又一种可能的实现方式中，在所述控制所述多个投射光源中至少一个第一投射光源向所述第一显示面投射第一虚拟场景图像之前，还包括：
确定位于所述透明全息显示屏的第一显示面一侧的第一用户的人眼位置；
从所述多个投射光源中，确定向所述第一用户投射第一虚拟场景图像所需的至少一个第一投射光源；
确定所述第一衍射光栅中处于所述至少一个第一投射光源到所述第一用户的人眼位置的光传播路径上的至少一个第五光栅子区域；
在所述控制所述多个投射光源中至少一个第一投射光源向所述第一显示面投射第一虚拟场景图像之前或者同时，还包括：
向所述第一衍射光栅发送第三电调控信号，所述第三电调控信号用于控制所述至少一个第五光栅子区域的衍射参数，使得所述至少一个第一投射光源投射出的第一虚拟场景图像经至少一个第五光栅子区域衍射至所述第一用户的人眼位置处。
通过以上方案可知，本申请的图像投射系统包括透明全息显示屏，该透明全息显示屏的两面均叠加有衍射光栅。在此基础上，控制设备控制多个投射光源中至少一个第一投射光源向透明全息显示屏的第一显示面投射虚拟场景图像的同时，还可以向叠加到透明全息显示屏的第二显示面上的衍射光栅输出电调控信号。由于该电调控信号可以控制该第二显示面上的衍射光栅中处于该至少一个第一投射光源的光投射区域内的至少一个子光栅区处于不透光状态，从而可以实现在透明全息显示屏的一面呈现出虚拟场景图像时，在透明全息显示屏的另一面的用户却无法看到虚拟场景图像，提高了呈现虚拟场景图像的多样性和灵活性。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的图像投射系统的一种组成架构示意图；
图2为本申请中图像投射系统的一种应用场景示意图；
图3为本申请实施例提供的图像投射系统的又一种组成架构示意图；
图4为本申请中图像投射系统的又一种应用场景示意图；
图5为本申请实施例提供的图像投射方法的一种流程示意图；
图6为本申请实施例提供的图像投射方法中向目标用户投射第二虚拟场景图像的一种流程示意图；
图7为本申请实施例提供的图像投射方法的又一种流程示意图；
图8为本申请实施例提供的一种电子设备的一种组成架构示意图。
说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”“第四”等(如果存在)是用于区别类似的部分，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例能够以除了在这里图示的以外的顺序实施。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有付出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
如图1，其示出了本申请一种图像投射系统的一种组成结构示意图。
在图1中，该图像投射系统包括：控制设备101、透明全息显示屏102、第一衍射光栅、第二衍射光栅以及多个投射光源103。
其中，透明全息显示屏102、第一衍射光栅、第二衍射光栅以及投射光源103均与控制设备101相连。
其中，图像投射系统中控制设备可以有一台，也可以有多台，在控制设备有多台的情况下，这多台控制设备可以组成为一个集群或者是一个分布式系统。
在本申请中，透明全息屏具有两个显示面，这两个显示面可以为透明全息显示屏的两个显示平面。如图1所示，呈现出的是透明全息显示屏一个显示面，而该显示面的背面为透明全息显示屏的另一显示面。为了便于区分，将透明全息显示屏的一个显示面称为第一显示面，而将另一个显示面称为第二显示面。
其中，该透明全息显示屏的两个显示面均叠加有衍射光栅。为了便于区分，将透明全息显示屏的第一显示面叠加的衍射光栅称为第一衍射光栅，而将该透明全息显示屏的第二显示面叠加的衍射光栅称为第二衍射光栅。
其中，衍射光栅是光栅的一种。它通过有规律的结构，使入射光的振幅或相位(或两者同时)受到周期性空间调制。
在本申请中透明全息显示屏的显示面上叠加的衍射光栅为衍射系数可调的衍射光栅，因此，该衍射光栅能够改变其不同光栅区域的光衍射情况，实现改变相应光栅区域的透光性。
由于衍射光栅中的缝隙小且密集，因此，即使在透明全息显示屏的显示面上叠加了衍射光栅，但是从用户角度来看衍射光栅是不可见的。相应的，在图1中也未示出叠加到透明全息显示屏上的衍射光栅。
在一种可能实现方式中，投射光源可以为设置于透明全息显示屏外且朝向该透明全息显示屏的投射光源。其中，多个投射光源中一部分投射光源朝向该透明全息显示屏的第一显示面，另一部分投射光源朝向该透明全息显示屏的第二显示面。
如，在图1中是以投射光源103位于透明全息显示屏外为例说明。
在又一种可能的实现方式中，该投射光源可以为设置于透明全息显示屏内的投射光源。如投射光源可以为透明全息显示屏内的有机发光半导体(OrganicElectroluminescence Display，OLED)，通过OLED发光点可以实现向透明全息显示屏上投射图像，其中，透明全息显示屏中多个投射光源的投射方向也可能会有所不同，如，多个投射光源中部分投射光源主要用于向透明全息显示屏的第一显示面投射图像，而另一部投射光源主要用于向透明全息显示屏的第二显示面投射图像。
可以理解的是，在投射光源为透明全息显示屏的内部投射光源的情况下，投射光源实际上是通过透明全息显示屏实现与控制设备的相连。
在本申请中，控制设备能够控制多个投射光源中至少一个第一投射光源向该透明全息显示屏的第一显示面投射第一虚拟场景图像，向该第二衍射光栅输出第一电调控信号。
其中，该第一电调控信号用于控制第二衍射光栅中处于该至少一个第一投射光源的光投射区域内的至少一个第一子光栅区处于不透光状态，使得该第一子光栅区遮挡该至少一个第一投射光源投射出的第一虚拟场景图像，以使得第一虚拟场景图像在该第二显示面不可见。
其中，至少一个第一投射光源属于多个投射光源中能够向第一显示面投射虚拟图像的投射光源中的部分投射光源。如，控制设备可以根据需要从能够向第一现实面投射虚拟图像的投射光源中选择部分投射光源作为第一投射光源，并控制各第一投射光源投射需要在第一显示面呈现的虚拟场景图像。
为了便于区分，本申请将第一显示面所需呈现的虚拟场景图像称为第一虚拟场景图像，并将向第一显示面投射该第一虚拟场景图像的投射光源称为第一投射光源。
其中，该第一场景图像可以结合透明显示显示屏在当前时刻之前输出的历史虚拟场景图像以及是用户在该第一显示面上的输入操作等的一种或者几种确定，对此不加限制。
可以理解的是，虽然第一投射光源是投射方向朝向或者主要朝向透明全息显示屏的第一显示面的投射光源，但是在至少一个第一投射光源向透明全息显示屏的第一显示面投射第一虚拟图像的情况下，第一投射光源的仍可能会存在部分光源投射到全息透明全息显示屏的第二显示面上。而为了提高虚拟图像展现的隐私性，使得在透明全息显示屏的第一显示面呈现的虚拟图像在第二现实面不可见，本申请需要遮挡第一投射光源经第二显示面向第二显示面一侧的用户投射出的光线。
相应的，为了遮挡第一投射光源投射到第二显示面上的光线，需要确定第二显示面上叠加的第二衍射光栅中处于该至少一个第一投射光源的光投射区域内的子光栅区域。此处确定的该子光栅区域为第二衍射光栅的部分区域，为了便于区分，将该子光栅区域称为第二衍射光栅中的第一子光栅区。
在此基础上，通过向第二衍射光栅输出用于调整第一子光栅区处于不透光状态的第一电调控信号，便可以使得第一子光栅区处于不透光状态，从而遮挡主第一投射光源经第二显示面投射出的第一虚拟图像，使得第二显示面一侧的用户无法看到第一虚拟图像。
可以理解的是，本申请中透明全息显示屏叠加的衍射光栅的具体形式可以有多种可能，相应的，实现调整衍射光栅的衍射系数的具体方式也会有所不同。
下面结合几种可能情况进行说明：
在一种可能的情况中，该第二衍射光栅为光栅间距可调的衍射光栅。如，第二衍射光栅的光栅间距为机械可调的。
在该种情况下，控制设备向第二衍射光栅发出的第一电控信号可以为指示第二衍射光栅调整其第一子光栅区的光栅物理间距直至处于遮光状态的控制指令。
在又一种可能的实现方式中，该第二衍射光栅为衍射系数可控的衍射光栅。相应的，在以上实施例中，第一电控信号可以用于控制第二衍射光栅中的至少一个第一子光栅区的衍射系数为不透光状态对应的衍射系数。
如，第二衍射光栅为电可控衍射光栅，通过调节施加到第二衍射光栅的不同衍射区域的驱动电压，可以调整相应衍射区域的衍射参数。在此基础上，第一电控信号为用于控制施加到第二衍射光栅中至少一个第一子光栅区的目标驱动电压，第一子光栅区被施加该目标驱动电压，则该第一子光栅区的衍射系数为处于不透光状态对应的衍射系数。
当然，此处是以一种电可控衍射光栅调整衍射系数的一种实现方式为例说明，在实际应用中电可控衍射光栅的衍射系数调整方式还可以有其他可能，对此不加限制。
当然，第一衍射光栅同样是可控衍射光栅，第一衍射光栅同样可以为衍射系数可控的衍射光栅，或者是，光栅间距可调的衍射光栅。
可以理解的是，由于第一显示面可以是透明全息显示屏的任意一个显示面，因此，通过本申请的图像投射系统可以实现在透明全息显示屏的任意一面投射虚拟场景图像，而在透明全息显示屏的另一显示面无法看到该虚拟场景图像，从而使得位于透明全息显示屏的不同显示面的用户可以看到不同的虚拟场景图像，也就可以保护透明全息显示屏任意一个显示面呈现出的虚拟场景图像的隐私性。
由以上内容可知，本申请的图像投射系统包括透明全息显示屏，该透明全息显示屏的两面均叠加有衍射光栅。在此基础上，控制设备控制多个投射光源中至少一个第一投射光源向透明全息显示屏的第一显示面投射虚拟场景图像的同时，还可以向叠加到透明全息显示屏的第二显示面上的衍射光栅输出电调控信号。由于该电调控信号可以控制该第二显示面上的衍射光栅中处于该至少一个第一投射光源的光投射区域内的至少一个子光栅区处于不透光状态，从而可以实现在透明全息显示屏的一面呈现出虚拟场景图像时，在透明全息显示屏的另一面的用户却无法看到虚拟场景图像，进而可以使得透明全息显示屏的两面可以呈现出不同的虚拟场景图像，提高了呈现虚拟场景图像的多样性和灵活性。
为了便于理解，本实施例的好处，下面结合一个应用场景进行说明，在一种可能的实现方式中，本申请的图像投射系统可以应用于教学场景中。在教学场景中，透明全息显示屏可以替代传统教室中的黑板或者白板。如图2所示的应用场景示意图。
在图2所示场景下，透明全息显示屏201的两个显示面对应的两侧分别有老师202和学生203。为了便于理解，将老师202相对透明全息显示屏所在的一侧称为透明全息显示屏的第一显示面一侧，相应的，多名学生203位于透明全息显示屏的另一个显示面一侧。
由于透明全息显示屏是透明的，因此，老师202不仅可以看到透明全息显示屏201的第一显示面呈现出的虚拟场景图像，还可以透过透明全息显示屏看到位于透明全息显示屏的第二显示面一侧的现实场景中的多位学生203。
在该场景中，如果希望老师在透明全息显示屏的第一显示面上输入的内容仅仅可以在第一显示面可见，而学生无法看到，那么控制设备可以基于老师向第一显示面输入的输入内容确定出待向第一显示面呈现的第一虚拟场景图像。
在此基础上，控制设备可以控制能够向第一显示面投射虚拟图像的至少一个第一投射光源向该第一显示面投射第一虚拟场景图像。同时，控制设备根据至少一个投射光源的投射光路，确定出第二显示面上叠加的第二衍射光栅中处于相应的投射光路覆盖区域内的子衍射光栅区，通过调整第二衍射光栅的子衍射光栅区处于不透光状态，便可以实现将老师的输入内容在第二显示面不可见，使得学生无法看到老师在第一显示面输入并呈现出的输入内容。
例如图2中针对每个学生，老师在全息透明显示屏中该学生对应位置处写入了该学生的分数等，而这些学生的分数是只有老师能够看到，而学生却无法看到。
可以理解的是，此处是以在第一显示面呈现的第一虚拟场景图像为老师向第一显示面中输入的输入内容为例，在实际应用中，第一虚拟场景图像还可以为老师预先设定或者是当前选择输出的虚拟场景图像，对此不加限制。例如，在图2中老师在第一显示面还可以看到仅供老师选择的一些操作选项，如为某个学生点赞或者触发向学生输出鼓掌的图标等，这些内容也可以仅仅呈现在第一显示面上，而第二显示面一侧的学生无法看到。
可以理解的是，在实际应用中，为了实现位于透明全息显示屏的同侧的多个用户之间观看虚拟场景图像的隐私性，还需要向透明全息显示屏同一侧的不同用户呈现不同的虚拟场景图像，使得透明全息显示屏同一侧不同位置上的用户所能看到的虚拟场景图像也不同。
为了实现该目的，本申请的图像投射系统还可以包括人眼追踪器。如图3所示，其示出了本申请图像投射系统的又一种组成结构示意图。
在图3中，该图像投射系统除了包括图1中的控制设备301、透明全息显示屏302、投射光源303、叠加到透明全息显示屏的第一显示面上的第一衍射光栅以及叠加到透明全息显示屏的第二显示面上的第二衍射光栅(衍射光栅未示出)之外，还包括至少一个人眼追踪器304。
其中，控制设备、透明全息显示屏、投射光源、第一衍射光栅和第二衍射光栅之间的连接关系及作用可以参见前面实施例的相关介绍。
在本申请实施例中，该人眼追踪器304与控制设备301相连。
人眼追踪器能够采集用户的眼睛定位数据，该用户的眼睛定位数据用于定位用户的人眼位置。
该人眼追踪器可以设置于透明全息显示屏所处的物理环境中。
在该种情况下，控制设备可以控制多个投影光源中至少一个第二投射光源向该全息透明显示屏的第二显示面投射第二虚拟场景图像，向第二衍射光栅发送第二电调控信号。
其中，该第二电调控信号用于控制该第二衍射光栅中处于该至少一个第二投射光源到目标用户的人眼位置的光传播路径上的至少一个第二光栅子区域的衍射参数，使得该至少一个第二投射光源投射出的第二虚拟场景图像经该至少一个第二光栅子区域仅投射至该目标用户的人眼。
该目标用户为位于该透明全息显示屏的第二显示面一侧的用户。其中，在第二显示面一侧的用户存在多个的情况下，针对不同的目标用户，用于向第二显示面投射第二虚拟场景图像的至少一个第二投射光源不同。
而针对不同的目标用户，经过第二显示面向该目标用户的人眼位置投射出的第二虚拟场景图像也可以不同，一般情况下，多个目标用户对应的第二虚拟场景图像不完全相同，具体可以根据需要设定。
其中，第二投射光源属于多个投射光源中能够向全息透明显示屏的第二显示面投射虚拟图像的至少一个投射光源。如，第二投射光源属于全息透明显示屏外设置的朝向该全息透明显示屏的第二显示面的投射光源。
为了便于区分，将需要向第二显示面投射的虚拟场景图像称为第二虚拟场景图像。
同时，由于第二虚拟场景图像是需要通过第二投射光源经第二显示面及第二衍射光栅投射至目标用户的人眼位置处，因此，该第二虚拟场景图像仅仅是需要展现给位于透明全息显示屏的第二显示面一侧中的该目标用户，而并对该目标用户之外处于该第二显示面一侧的其他用户则不可见。
为了使得第二投射光源经第二显示面和第二衍射光栅能够将第二虚拟场景图像投射到目标用户的人眼位置处，本申请可以结合至少一个第二投影光源到该目标用户的人眼位置的投射光路，确定使得至少一个第二投射光源经第二衍射光栅中至少一个第二子光栅区域投射到目标用户的人眼位置时，需要使得第二子光栅区所需满足的衍射参数等信息。相应的，可以向第二衍射光栅发送使得第二子光栅区处于相应衍射参数的第二电调控信号。
可以理解的是，在图3的图像投射系统中，该人眼追踪器可以有多种可能。
在一种可能的情况中，该人眼追踪器可以为图像采集器。在此基础上，通过图像采集器可以采集用户的用户图像，用户图像中可以包括用户的人眼图像，在此基础上，可以将用户图像作为分析并定位用户的人眼位置的眼睛定位数据。
在此基础上，控制设备可以根据一个或者多个人眼追踪器采集到的用户的用户图像，确定出该用户的人眼位置。如，根据用户图像确定出人脸图像区域，并定位人脸图像区域中的人眼位置，结合人眼跟踪器的位置等，综合计算出用户的人眼位置。可以理解的是，在用户的用户图像已知的情况下，计算用户的人眼位置的具体实现方式可以有多种可能，本申请对此不加限制。
在又一种可能的情况中，人眼追踪器还可以为红外探测器等能够感应用户位置的传感器，在此基础上，人眼追踪器可以感应到用户的用户位置等用于定位该用户的人眼位置的相关辅助信息。
相应的，控制设备可以结合人眼追踪器感应到的用于定位用户的人眼位置的辅助信息，可以计算出用户的人眼位置，对于具体计算方式不加限制。
由前面介绍可知，第二衍射光栅可以有多种可能形式。如，在一种可能的情况中，第二衍射光栅可以为光栅间距可调的衍射光栅。在该种情况下，控制设备发出的第二电控信号可以为一个调整光栅物理间距的控制信号，控制信号可以包含第二子光栅。相应的，该第二衍射光栅基于该第二电控信号调整该第二子光栅区的光栅间距，使得第二子光栅区具备将第二虚拟场景图像投射至目标用户的人眼所需的衍射参数。
在又一种可能的实现方式中，该第二衍射光栅为衍射系数可控的衍射光栅。相应的，第二电控信号用于控制第二衍射光栅中至少一个第二光栅子区域的衍射系数为目标衍射系数。该第二衍射光栅的至少一个第二衍射子区域具有目标衍射系数，使得该至少一个第二衍射子区域能将第二虚拟场景图像投射至该目标用户的人眼。
可以理解的是，在图3所示的图像投射系统中，控制设备可以通过图像采集设备等确定出位于透明全息显示屏的第二显示面一侧的用户，同时，控制设备可以将第二显示面一侧的每个用户均作为目标用户，并根据实际需要，通过第二显示面和第二衍射光栅向不同目标用户投射不同的第二虚拟场景图像。
在一种可选方式中，为了能够实现更有针对性向第二显示面一侧的用户投射虚拟场景图像，还可以是由位于透明全息显示屏的第一显示面一侧的第一用户可以从位于第二显示面一侧的用户中选择一个用户为目标用户。
其中，为了便于区分，将位于透明全息显示屏的第一显示面一侧的用户称为第一用户，而将位于透明全息显示屏的第二显示面一侧的用户称为第二用户。
具体的，在图3所示的图像投射系统还可以包括：至少一个交互感应器(图3中未示出)。
该交互感应器采集第一用户向该第一显示面输入的输入操作数据，将该输入操作数据传输给控制设备。
在一种可能的情况中，该交互感应器可以设置于透明全息显示屏外，并与控制设备相连。如，该交互感应器可以为图像采集器，图像采集器可以采集第一显示面一侧的第一用户向第一显示面输入的输入操作数据。当然，该交互感应器还可以为混合现实或者增强现实技术中使用的能够定位用户肢体动作行为的感应器，对此不加限制。
在又一种可能的情况中，交互感应器可以是设置于透明全息显示屏上的触摸感应单元。在该种情况下，该交互感应器经透明全息显示屏与控制设备相连。
在图像投射系统中还可以同时设置多种类型的交互感应器，以便更为全面和准确的确定用户输入的输入数据。
相应的，控制设备还用于，按照第一用户输入的输入操作数据确定该第一用户选择的目标用户，该目标用户属于位于显示屏的第二显示面一侧的至少一个第二用户。
为了便于理解，下面结合又一个应用场景进行说明。
如图4所示，其示出了本申请的方案适用的又一种应用场景的示意图。为了便于描述，仍以该应用场景为教学场景为例说明。由图4可以看出，在透明全息显示屏401的第一显示面一侧具有一位老师402。该老师透过该透明全息显示屏401可以看到教室内不同座位上的学生403，这些学生位于该透明全息显示屏的第二显示面一侧。
在此基础上，老师如果希望向某教室内的某个学生输出特定的虚拟场景图像，则该老师在透明全息显示屏上看到该学生的位置处点击该学生，如图4中，该老师402点击了最左列第二行的目标学生404，则该目标学生为老师402选择的目标用户。
相应的，控制设备可以获得教室内设置的至少一个图像采集装置(一般为多个图像采集装置)采集到的教室内的图像，结合教室内的图像，确定出老师向透明全息显示屏的第一显示面输入的输入操作所指向的目标学生。
或者是，控制设备基于透明全息显示屏上的触摸感应单元确定出老师输入的选择操作的输入位置点，然后，结合各个学生相对透明全息显示屏的相对位置(可以预先设定或者是通过图像采集装置采集到的学生图像确定等)，确定该输入位置点所指向的目标学生。
在以上基础上，控制设备可以确定需要向该目标学生投射的第二虚拟场景图像。如，控制设备在确定老师选择的目标学生之后，可以将老师在第一显示面中该目标学生位置处输入的内容作为待呈现给该目标学生的第二虚拟场景图像；或者是，控制设备在确定老师选择的目标学生之后，可以在透明全息显示屏的第一显示面中该目标学生对应位置处显示出操作选项，如图2中示出的鼓掌或者笑脸等图标，在此基础上，可以将老师选择的操作图标所触发呈现的鼓掌或者笑脸等的虚拟场景图像，确定为需要呈现给该目标学生的第二虚拟场景图像。
进一步的，控制设备基于目标学生的人眼位置，确定向该目标学生投射第二虚拟场景图像所需的至少一个第二投射光源，并控制该第二投射光源向第二显示面投射第二虚拟场景图像。与此同时，控制设备根据至少一个第二投影光源到目标学生的人眼位置的投射光路，确定第二衍射光栅上处于该投射光路上的子光栅区域所需的衍射参数，并通过控制该子光栅区具有相应的衍射参数，使得子光栅区域可以将第二投射光源投射的第二虚拟场景图像衍射到该目标学生的人眼位置处，使得老师希望该目标学生的第二虚拟场景图像仅仅能够被该目标学生看到，而其他学生看不到。
另一方面，本申请还提供了一种图像投射方法，该图像投射方法应用于如上任意一个实施例中的图像投射系统中的控制设备。
如图5所示，其示出了本申请一种图像投射方法一个实施例的流程示意图，本实施例的方法应用于前面任意一个实施例中的图像投射系统中的控制设备。本实施例的方法可以包括：
S501，确定待向透明全息显示屏的第一显示面投射的第一虚拟场景图像。
该透明全息显示屏的第一显示面叠加有第一衍射光栅，且第二显示面叠加有第二衍射光栅，具体参见前面的介绍，在此不再赘述。
如，在检测到位于第一显示面一侧的第一用户在第一显示面输入的输入操作后，基于所述输入操作确定待投射的第一虚拟场景图像。
又如，还可以根据第一显示面在当前时刻之前播放的虚拟场景图像，确定该第一虚拟场景图像。
当然，还可以有其他确定第一虚拟场景图像的方式，对此不加限制。
S502，控制多个投射光源中至少一个第一投射光源向第一显示面投射第一虚拟场景图像。
如，可以先从多个投射光源中确定能够向第一显示面投射虚拟场景图像的至少一个第一投射光源，然后，再控制至少一个第一投射光源向外投射第一虚拟场景图像。
S503，向第二衍射光栅输出第一电调控信号。
其中，第一电调控信号用于控制第二衍射光栅中处于至少一个第一投射光源的光投射区域内的至少一个第一子光栅区处于不透光状态，使得第一子光栅区遮挡至少一个第一投射光源投射出的第一虚拟场景图像，以使得第一虚拟场景图像在第二显示面不可见。
需要说明的是，该步骤S502和S503的顺序并不限于图5所示，在实际应用中，为了能够最大限度的减少第一虚拟场景图像在第二显示面可见的情况，该步骤S503也可以是在步骤S502之前执行，或者是与步骤S502同步执行。
该实施例中的相关步骤与前面图像投射系统中控制设备执行的操作相同，具体可以参见前面实施例的相关介绍，在此不再赘述。
基于前面系统实施例介绍可知，本申请还实现能够向全息透明显示屏的第二显示面一侧的不同第二用户投射不同的第二虚拟场景图像，使得第二显示面一侧不同位置出的第二用户所能看到的虚拟场景图像可以不同，且第二用户在其位置上看到的内容不被其他第二用户看到，即实现对每个第二用户观看的内容的隐私保护。
为了实现该目的，该控制设备还可以确定位于显示屏的第二显示面一侧的目标用户；控制多个投影光源中至少一个第二投射光源向该第二显示面投射第二虚拟场景图像；向第二衍射光栅发送第二电调控信号。该第二电调控信号用于控制第二衍射光栅中处于所述至少一个第二投射光源到目标用户的人眼位置的光传播路径上的至少一个第二光栅子区域的衍射参数，使得所述至少一个第二投射光源投射出的第二虚拟场景图像经该至少一个第二光栅子区域仅投射至该目标用户的人眼。
其中，确定目标用户的一种实现方式可以为：获得第一用户在第一显示面输入的输入操作，该第一用户为位于所述透明全息显示屏的第一显示面一侧的用户；基于输入操作在第一显示面上的输入位置以及位于该第二显示面一侧的至少一个第二用户的位置，确定输入操作所针对的目标用户。如，输入位置指向某个第二用户的位置，则该第二用户为目标用户。
可以理解的是，为了能够使得第二用户能够看到3维的虚拟场景图像，并减少由于两个第二用户的位置相近而导致两个第二用户在不同位置看到相同的虚拟场景图像，本申请还可以分别针对第二用户的左眼和右眼分别投射不同的虚拟场景图像，以根据第二用户的双眼视差使得第二用户看到由投射至左眼和右眼的两幅虚拟场景图像合成的三维虚拟场景图像。
下面结合一种实现方式进行说明，如图6所示，其示出了本申请提供的图像投射方法中向目标用户投射第二虚拟场景图像的一种流程示意图，本实施例的方法应用于前面任意一个实施例中的图像投射系统中的控制设备。本实施例的方法可以包括：
S601，获得第一用户在第一显示面输入的输入操作。
该第一用户为位于所述透明全息显示屏的第一显示面一侧的用户。
S602，基于输入操作在第一显示面上的输入位置以及位于该第二显示面一侧的至少一个第二用户的位置，确定输入操作所针对的目标用户。
该目标用户属于该至少一个第二用户。
以上步骤S601到S602为确定目标用户的一种实现方式，但是可以理解的是，对于前面提到的其他方式也同样适用于本实施例。
S603，获得该目标用户的左眼位置和右眼位置。
其中，目标用户的左眼和右眼的位置可以与前面确定目标用户的人眼位置的具体方式相同。如，可以基于图像采集装置采集到的目标用户的用户图像分析出目标用户的左眼位置和右眼位置。当然，还可以是通过红外感应器感应到的目标用户的定位数据来确定目标用户的左眼位置和右眼位置等，对此不加限制。
S604，确定待向该目标用户呈现的第二虚拟场景图像。
如，该第二虚拟场景图像可以基于位于透明全息显示屏的第一显示面一侧的第一用户的输入操作或者选择操作确定。
当然，本申请对通过何种方式确定需要向该目标用户呈现的第二虚拟场景图像并不限制，其他方式也同样适用于本实施例。
S605，基于该第二虚拟场景图像，确定待投射至该目标用户的左眼的第一子虚拟场景图像和待投射至该目标用户的右眼的第二子虚拟场景图像。
其中，该第一子虚拟场景图像和第二子虚拟场景图像是用于叠加生成三维的第二虚拟场景图像的虚拟图像。
如，可以基于存储的第二虚拟场景图像对应子虚拟场景图像，得到该第一子虚拟场景图像和第二子虚拟场景图像。
S606，基于该目标用户的左眼位置，确定将该第一子虚拟场景图像投射至该目标用户的左眼所需的至少一个第三投射光源。
S607，基于该目标用户的右眼位置，确定将该第二子虚拟场景图像投射至该目标用户的右眼所需的至少一个第四投射光源。
其中，该第三投射光源和第四投射光源实际上属于目标用户对应的至少一个第二投射光源。
其中，至少一个第三投射光源属于能够经第二显示面向目标用户的左眼进行光投射的投射光源中的部分或者全部投射光源；而至少一个第四投射光源属于能够经第二显示面向目标用户的右眼进行光投射的投射光源中的部分或者全部。
S608，控制该至少一个第三投射光源向该第二显示面投射第一子虚拟场景图像，控制该至少一个第四投射光源向该第二显示面投射第二子虚拟场景图像，以向该目标用户呈现出由该第一子虚拟场景图像和第二子虚拟场景图像叠加出的该第二虚拟场景图像。
S609，向该第二衍射光栅发送第一电调控子信号。
其中，该第一电调控子信号用于控制该第二衍射光栅中处于该至少一个第三投射光源到该目标用户的左眼位置的光传播路径上的至少一个第三光栅子区域具有第一衍射参数，使得该至少一个第三投射光源投射出的第一子虚拟场景图像经该至少一个第三光栅子区域仅投射至该目标用户的左眼。
其中，在第三光栅子区域具有第一衍射参数的情况下，至少一个第三投射光源投射的第一子虚拟场景图像经第二显示面到达第三光栅子区域之后，通过第三光栅子区域的光栅衍射能够将第一子虚拟场景图像投射至目标用户的左眼位置处。
S610，向该第二衍射光栅发送第二电调控子信号。
其中，第二电调控子信号用于控制该第二衍射光栅中处于该至少一个第四投射光源到该目标用户的右眼位置的光传播路径上的至少一个第四光栅子区域具有第二衍射参数，使得该至少一个第四投射光源投射出的第二子虚拟场景图像经该至少一个第四光栅子区域仅投射至该目标用户的右眼。
类似的，第四子光栅区域具有第二衍射参数的情况下，至少一个第四投射光源投射的第一子虚拟场景图像经第二显示面到达第四光栅子区域之后，通过第四光栅子区域的光栅衍射能够将第二子虚拟场景图像投射至目标用户的右眼位置处。
由以上可知，由于第一子虚拟场景图像只能被投射至目标用户的左眼内，而第二子虚拟场景图像只能被投射至目标用户的右眼内，而基于两眼视差，目标用户能够看到由第一子虚拟场景图像和第二子虚拟场景图像合成的三维的第二虚拟场景图像。而且，由于控制设备对于控制光源和第二衍射光栅的衍射参数的控制，使得只有目标用户的左眼才能够看到第一子虚拟场景图像，且只有目标用户的右眼才能够看到第二子虚拟场景图像，因此，也只有目标用户能够看到合成的第二虚拟场景图像，而位于透明全息显示屏的第二显示面一侧的其他用户却无法看到该第二虚拟场景图像，提高了虚拟场景图像的隐私保护。
可以理解的是，在本申请中还可以实现针对位于透明全息显示屏的第一显示面一侧的某个第一用户的位置，合理控制第一虚拟场景图像的投射，使得只有在该第一用户的位置处才能够看到该第一虚拟场景图像，而在第一显示面一侧的其他第一用户的位置处，则无法看到该第一虚拟场景图像。
如，参见图7，其示出了本申请一种图像投射方法的又一种流程示意图，本实施例的方法应用于控制设备，本实施例可以包括：
S701，确定待向透明全息显示屏的第一显示面投射的第一虚拟场景图像。
S702，确定位于显示屏的第一显示面一侧的第一用户的人眼位置。
其中，定位第一用户的人眼位置的方式与前面定位目标用户的人眼位置的具体方式相同，在此不再赘述。
S703，从该多个投射光源中，确定向该第一用户投射第一虚拟场景图像所需的至少一个第一投射光源。
如，按照各个投射光源的光投射角度以及第一用户的人眼位置，确定能够将光源投射至向第一用户的人眼位置处的至少一个第一投射光源。
S704，确定第一衍射光栅中处于该至少一个第一投射光源到该第一用户的人眼位置的光传播路径上的至少一个第五光栅子区域。
该第五光栅子区域为第一衍射光栅中处于该第一投射光源到第一用户的人眼位置的光传播路径上的衍射光栅区域，因此，需要合理调整该第五光栅子区域的光衍射参数，以使得第五光栅子区域能够将第一投射光源投射至其上的光衍射到第一用户的人眼处。
S705，向该第一衍射光栅发送第三电调控信号。
其中，第三电调控信号用于控制该至少一个第五光栅子区域的衍射参数，使得至少一个第一投射光源投射出的第一虚拟场景图像经至少一个第五光栅子区域衍射至该第一用户的人眼位置处。
如，第一衍射光栅为光栅间距物理可调的衍射光栅时，该第三电调控信号用于指示第一衍射光栅第五光栅子区域中光栅间距，使得第五光栅子区域的衍射参数能够满足将第一投射光源投射出的第一虚拟场景图像经衍射至该第一用户的人眼位置处的投射要求。
又如，第一衍射光栅为衍射系数可控的衍射光栅，则该第三电调控信号用于控制第五光栅子区域的衍射系数为指定衍射系数。在第五光栅子区域处于指定衍射系数下，第五光栅子区域能够将第一投射光源投射出的第一虚拟场景图像经衍射至该第一用户的人眼位置处。
S706，控制至少一个第一投射光源向第一显示面投射第一虚拟场景图像。
如，可以先从多个投射光源中确定能够向第一显示面投射虚拟场景图像的至少一个第一投射光源，然后，再控制至少一个第一投射光源向外投射第一虚拟场景图像。
S707，向第二衍射光栅输出第一电调控信号。
其中，第一电调控信号用于控制第二衍射光栅中处于至少一个第一投射光源的光投射区域内的至少一个第一子光栅区处于不透光状态，使得第一子光栅区遮挡至少一个第一投射光源投射出的第一虚拟场景图像，以使得第一虚拟场景图像在第二显示面不可见。
又一方面，本申请还提供了一种电子设备，如图8所示，其示出了该电子设备的一种组成结构示意图，该电子设备可以为任意类型的电子设备，该电子设备至少包括存储器801和处理器802；
其中，处理器801用于执行如上任意一个实施例中的图像投射方法。
该存储器802用于存储处理器执行操作所需的程序。
可以理解的是，该电子设备还可以包括显示单元803以及输入单元804。
当然，该电子设备还可以具有比图8更多或者更少的部件，对此不加限制。
另一方面，本申请还提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现如上任意一个实施例所述的图像投射方法。
本申请还提出了一种计算机程序，该计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机程序在电子设备上运行时，用于执行如上任意一个实施例中的图像投射方法。
需要说明的是，本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。同时，本说明书中各实施例中记载的特征可以相互替换或者组合，使本领域专业技术人员能够实现或使用本申请。对于装置类实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括要素的过程、方法、物品或者设备中还存在另外的相同要素。
对所公开的实施例的上述说明，使本领域技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下，在其它实施例中实现。因此，本申请将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (8)

1.一种图像投射系统，包括：控制设备、透明全息显示屏、第一衍射光栅、第二衍射光栅、多个投射光源以及至少一个人眼追踪器；
其中，所述透明全息显示屏、第一衍射光栅、第二衍射光栅、所述投射光源以及所述人眼追踪器均与所述控制设备相连；
所述透明全息显示屏的第一显示面叠加有所述第一衍射光栅；
所述透明全息显示屏的第二显示面叠加有所述第二衍射光栅；
所述投射光源为设置于所述透明全息显示屏外且朝向所述透明全息显示屏的投射光源，或者是设置于所述透明全息显示屏内的投射光源；
所述人眼追踪器采集用户的眼睛定位数据，所述用户的眼睛定位数据用于定位所述用户的人眼位置；
所述控制设备控制所述多个投射光源中至少一个第一投射光源向所述透明全息显示屏的第一显示面投射第一虚拟场景图像，至少一个第二投射光源向所述第二显示面投射第二虚拟场景图像，控制所述第二衍射光栅中处于所述至少一个第一投射光源的光投射区域内的至少一个第一子光栅区处于不透光状态，使得所述第一子光栅区遮挡所述至少一个第一投射光源投射出的第一虚拟场景图像；控制所述第二衍射光栅中处于所述至少一个第二投射光源到目标用户的人眼位置的光传播路径上的至少一个第二光栅子区域的衍射参数，使得所述至少一个第二投射光源投射出的第二虚拟场景图像经所述至少一个第二光栅子区域仅投射至所述目标用户的人眼，所述目标用户为位于所述透明全息显示屏的第二显示面一侧的用户。
2.根据权利要求1所述的图像投射系统，还包括：至少一个交互感应器；
所述交互感应器设置于所述透明全息显示屏外，与所述控制设备相连；或者，所述交互感应器为设置于所述透明全息显示屏上的触摸感应单元，经所述透明全息显示屏与所述控制设备相连；
所述交互感应器采集第一用户向所述第一显示面输入的输入操作数据，将所述输入操作数据传输给所述控制设备，所述第一用户为位于所述透明全息显示屏的第一显示面一侧的用户；
所述控制设备还用于，按照所述输入操作数据确定所述第一用户选择的所述目标用户，所述目标用户属于所述位于所述透明全息显示屏的第二显示面一侧的至少一个第二用户。
3.根据权利要求1所述的图像投射系统，所述第一衍射光栅和第二衍射光栅为光栅间距可调的衍射光栅；
第二衍射光栅基于第一电调控信号，缩小第一子光栅区的光栅间距直至所述第一子光栅区处于遮光状态；基于第二电调控信号调整所述第二光栅子区域的光栅间距，使得第二光栅子区域具备将第二虚拟场景图像投射至所述目标用户的人眼所需的衍射参数。
4.根据权利要求1所述的图像投射系统，所述第一衍射光栅和第二衍射光栅为衍射系数可控的衍射光栅；
第一电调控信号用于控制所述第二衍射光栅中的至少一个第一子光栅区的衍射系数为不透光状态对应的衍射系数；
第二电调控信号用于控制所述第二衍射光栅中至少一个第二光栅子区域的衍射系数为目标衍射系数；
所述第二衍射光栅的至少一个第二衍射子区域具有所述目标衍射系数，使得所述至少一个第二衍射子区域能将第二虚拟场景图像投射至所述目标用户的人眼。
5.一种图像投射方法，包括：
确定待向透明全息显示屏的第一显示面投射的第一虚拟场景图像，所述透明全息显示屏具有第一显示面和第二显示面，所述第一显示面叠加有第一衍射光栅，所述第二显示面叠加有第二衍射光栅；
控制多个投射光源中至少一个第一投射光源向所述第一显示面投射第一虚拟场景图像；至少一个第二投射光源向所述第二显示面投射第二虚拟场景图像；
控制所述第二衍射光栅中处于所述至少一个第一投射光源的光投射区域内的至少一个第一子光栅区处于不透光状态，使得所述第一子光栅区遮挡所述至少一个第一投射光源投射出的第一虚拟场景图像；
确定位于所述透明全息显示屏的第二显示面一侧的目标用户；
控制所述第二衍射光栅中处于所述至少一个第二投射光源到所述目标用户的人眼位置的光传播路径上的至少一个第二光栅子区域的衍射参数，使得所述至少一个第二投射光源投射出的第二虚拟场景图像经所述至少一个第二光栅子区域仅投射至所述目标用户的人眼。
6.根据权利要求5所述的方法，所述确定位于所述透明全息显示屏的第二显示面一侧的目标用户，包括：
获得第一用户在所述第一显示面输入的输入操作，所述第一用户为位于所述透明全息显示屏的第一显示面一侧的用户；
基于所述输入操作在所述第一显示面上的输入位置以及位于所述第二显示面一侧的至少一个第二用户的位置，确定所述输入操作所针对的目标用户。
7.根据权利要求5所述的方法，在所述向所述第二衍射光栅发送第二电调控信号之前，还包括：
获得所述目标用户的左眼位置和右眼位置；
所述控制所述多个投射光源中至少一个第二投射光源向所述第二显示面投射第二虚拟场景图像，包括：
确定待向所述目标用户呈现的第二虚拟场景图像；
基于所述第二虚拟场景图像，确定待投射至所述目标用户的左眼的第一子虚拟场景图像和待投射至所述目标用户的右眼的第二子虚拟场景图像；
基于所述目标用户的左眼位置，确定将所述第一子虚拟场景图像投射至所述目标用户的左眼所需的至少一个第三投射光源；
基于所述目标用户的右眼位置，确定将所述第二子虚拟场景图像投射至所述目标用户的右眼所需的至少一个第四投射光源；
控制所述至少一个第三投射光源向所述第二显示面投射所述第一子虚拟场景图像，控制所述至少一个第四投射光源向所述第二显示面投射所述第二子虚拟场景图像，以向所述目标用户呈现出由所述第一子虚拟场景图像和第二子虚拟场景图像叠加出的所述第二虚拟场景图像；
所述向所述第二衍射光栅发送第二电调控信号，包括：
向所述第二衍射光栅发送第一电调控子信号，所述第一电调控子信号用于控制所述第二衍射光栅中处于所述至少一个第三投射光源到所述目标用户的左眼位置的光传播路径上的至少一个第三光栅子区域具有第一衍射参数，使得所述至少一个第三投射光源投射出的第一子虚拟场景图像经所述至少一个第三光栅子区域仅投射至所述目标用户的左眼；
向所述第二衍射光栅发送第二电调控子信号，所述第二电调控子信号用于控制所述第二衍射光栅中处于所述至少一个第四投射光源到所述目标用户的右眼位置的光传播路径上的至少一个第四光栅子区域具有第二衍射参数，使得所述至少一个第四投射光源投射出的第二子虚拟场景图像经所述至少一个第四光栅子区域仅投射至所述目标用户的右眼。
8.根据权利要求5所述的方法，在所述控制所述多个投射光源中至少一个第一投射光源向所述第一显示面投射第一虚拟场景图像之前，还包括：
确定位于所述透明全息显示屏的第一显示面一侧的第一用户的人眼位置；
从所述多个投射光源中，确定向所述第一用户投射第一虚拟场景图像所需的至少一个第一投射光源；
确定所述第一衍射光栅中处于所述至少一个第一投射光源到所述第一用户的人眼位置的光传播路径上的至少一个第五光栅子区域；
在所述控制所述多个投射光源中至少一个第一投射光源向所述第一显示面投射第一虚拟场景图像之前或者同时，还包括：
向所述第一衍射光栅发送第三电调控信号，所述第三电调控信号用于控制所述至少一个第五光栅子区域的衍射参数，使得所述至少一个第一投射光源投射出的第一虚拟场景图像经所述至少一个第五光栅子区域衍射至所述第一用户的人眼位置处。
CN202111038005.XA 2021-09-06 2021-09-06 图像投射方法和系统 Active CN113741162B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202111038005.XA CN113741162B (zh) 2021-09-06 2021-09-06 图像投射方法和系统
US17/654,277 US20230076136A1 (en) 2021-09-06 2022-03-10 Image projection method and system
GB2205437.3A GB2610463A (en) 2021-09-06 2022-04-12 Image projection method and system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111038005.XA CN113741162B (zh) 2021-09-06 2021-09-06 图像投射方法和系统

Publications (2)

Publication Number Publication Date
CN113741162A CN113741162A (zh) 2021-12-03
CN113741162B true CN113741162B (zh) 2022-11-22

Family

ID=78735961

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111038005.XA Active CN113741162B (zh) 2021-09-06 2021-09-06 图像投射方法和系统

Country Status (3)

Country Link
US (1) US20230076136A1 (zh)
CN (1) CN113741162B (zh)
GB (1) GB2610463A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115032871A (zh) * 2022-07-06 2022-09-09 大爱全息(北京)科技有限公司 一种全息自由衍射多层图像显示方法、装置及系统

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113050276A (zh) * 2019-12-27 2021-06-29 华为技术有限公司 衍射图像叠加器、显示设备模组及头戴式显示设备

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4822104B2 (ja) * 2005-01-21 2011-11-24 大日本印刷株式会社 投影システム
US8610814B2 (en) * 2011-05-09 2013-12-17 Intellectual Ventures Fund 83 Llc Switchable imaging apparatus for display and capture
WO2015006784A2 (en) * 2013-07-12 2015-01-15 Magic Leap, Inc. Planar waveguide apparatus with diffraction element(s) and system employing same
US9964768B2 (en) * 2016-03-04 2018-05-08 Sharp Kabushiki Kaisha Head mounted display using spatial light modulator to generate a holographic image
JP2018105902A (ja) * 2016-12-22 2018-07-05 慶企 星 両面投影システム、及び両面投影方法
CN113196148A (zh) * 2018-12-21 2021-07-30 奇跃公司 包含伪影减轻的目镜架构
CN110109319B (zh) * 2019-05-10 2021-01-19 上海瀚沧科技有限公司 增强现实可调透明投影屏及投影方法和制作方法
CN112950791A (zh) * 2021-04-08 2021-06-11 腾讯科技（深圳）有限公司 一种显示方法和相关装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113050276A (zh) * 2019-12-27 2021-06-29 华为技术有限公司 衍射图像叠加器、显示设备模组及头戴式显示设备

Also Published As

Publication number Publication date
GB202205437D0 (en) 2022-05-25
GB2610463A (en) 2023-03-08
US20230076136A1 (en) 2023-03-09
CN113741162A (zh) 2021-12-03

Similar Documents

Publication Publication Date Title
US9740005B2 (en) Selectively pairing an application presented in virtual space with a physical display
US10013793B2 (en) Focus guidance within a three-dimensional interface
US9046962B2 (en) Methods, systems, apparatuses, circuits and associated computer executable code for detecting motion, position and/or orientation of objects within a defined spatial region
Poelman et al. As if being there: mediated reality for crime scene investigation
Azuma A survey of augmented reality
Gutwin Improving focus targeting in interactive fisheye views
KR100913933B1 (ko) 화상 제시 장치 및 화상 제시 방법
US8314832B2 (en) Systems and methods for generating stereoscopic images
US10650573B2 (en) Synthesizing an image from a virtual perspective using pixels from a physical imager array weighted based on depth error sensitivity
CA2810307A1 (en) Image recognition apparatus, operation determining method and computer readable medium
JP2005509901A (ja) 立体マルチアスペクト画像の視覚化システムおよび視覚化方法
KR20130108643A (ko) 응시 및 제스처 인터페이스를 위한 시스템들 및 방법들
CN104345802A (zh) 控制近眼式显示器的方法和设备
EP2475180A2 (en) Image providing apparatus and image providing method based on user's location
CN113741162B (zh) 图像投射方法和系统
KR20180059765A (ko) 정보 처리 장치, 정보 처리 방법 및 프로그램
Trindade et al. Improving 3D navigation in multiscale environments using cubemap-based techniques
Valkov et al. Evaluation of depth perception for touch interaction with stereoscopic rendered objects
US9025007B1 (en) Configuring stereo cameras
US9918066B2 (en) Methods and systems for producing a magnified 3D image
Gruenefeld et al. Behind the scenes: Comparing x-ray visualization techniques in head-mounted optical see-through augmented reality
Southard Viewing model for virtual environment displays
JP2004194033A (ja) 立体画像表示システム及び立体ポインタの表示方法
Arslan et al. E-Pad: Large display pointing in a continuous interaction space around a mobile device
Moruzzi et al. Design and implementation of eye tracking application for generation of augmented reality content on spatial see through display of remote and virtual control tower (RVT)

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant