CN110476148B - 用于提供多视图内容的显示系统和方法 - Google Patents

用于提供多视图内容的显示系统和方法 Download PDF

Info

Publication number
CN110476148B
CN110476148B CN201880020820.3A CN201880020820A CN110476148B CN 110476148 B CN110476148 B CN 110476148B CN 201880020820 A CN201880020820 A CN 201880020820A CN 110476148 B CN110476148 B CN 110476148B
Authority
CN
China
Prior art keywords
viewing
image
content
beamlet
pixels
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201880020820.3A
Other languages
English (en)
Other versions
CN110476148A (zh
Inventor
A.H.吴
P.H.迪茨
D.S.汤普森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Misapplied Sciences Inc
Original Assignee
Misapplied Sciences Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Misapplied Sciences Inc filed Critical Misapplied Sciences Inc
Publication of CN110476148A publication Critical patent/CN110476148A/zh
Application granted granted Critical
Publication of CN110476148B publication Critical patent/CN110476148B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/32—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using arrays of controllable light sources; using moving apertures or moving light sources
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1446—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display display composed of modules, e.g. video walls
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/002—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to project the image of a two-dimensional display, such as an array of light emitting or modulating elements or a CRT
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/003—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/02—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes by tracing or scanning a light beam on a screen
    • G09G3/025—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes by tracing or scanning a light beam on a screen with scanning or deflecting the beams in two directions or dimensions
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/2003—Display of colours
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/10—Intensity circuits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/349—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/349—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
    • H04N13/351—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking for displaying simultaneously
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2300/00—Aspects of the constitution of display devices
    • G09G2300/04—Structural and physical details of display devices
    • G09G2300/0439—Pixel structures
    • G09G2300/046—Pixel structures with an emissive area and a light-modulating area combined in one pixel
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2300/00—Aspects of the constitution of display devices
    • G09G2300/04—Structural and physical details of display devices
    • G09G2300/0469—Details of the physics of pixel operation
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/0261—Improving the quality of display appearance in the context of movement of objects on the screen or movement of the observer relative to the screen
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/028—Improving the quality of display appearance by changing the viewing angle properties, e.g. widening the viewing angle, adapting the viewing angle to the view direction
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/068—Adjustment of display parameters for control of viewing angle adjustment
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0686—Adjustment of display parameters with two or more screen areas displaying information with different brightness or colours
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/10—Mixing of images, i.e. displayed pixel being the result of an operation, e.g. adding, on the corresponding input pixels
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/14—Solving problems related to the presentation of information to be displayed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/14—Detecting light within display terminals, e.g. using a single or a plurality of photosensors
    • G09G2360/141—Detecting light within display terminals, e.g. using a single or a plurality of photosensors the light conveying information used for selecting or modulating the light emitting or modulating element
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/14—Detecting light within display terminals, e.g. using a single or a plurality of photosensors
    • G09G2360/145—Detecting light within display terminals, e.g. using a single or a plurality of photosensors the light originating from the display screen

Abstract

一种显示系统，包括一个或多个多视图(MV)像素，每个多视图(MV)像素被配置为在子束坐标系中沿不同方向发射子束。该显示系统包括输入节点和耦接到输入节点的处理器，该输入节点接收在观看区域坐标系中相对于MV像素定位的多个观看区域的指定。处理器分别将多个内容与多个观看区域相关联，并确定在观看区域坐标系和子束坐标系之间进行转换的映射。对于从多个内容生成的多个图像中的每个图像，处理器使用该映射，识别从每个MV像素指向一个观看区域以形成图像的子束的束。处理器输出控制信令，该控制信令定义每个束中的每个子束的颜色和亮度，以将对应的图像投影到对应的观看区域。

Description

用于提供多视图内容的显示系统和方法
技术领域
本公开涉及显示系统和方法，并且特别地涉及能够使用一个或多个多视图(MV)像素在多个观看区域(viewing zone)形成多个图像的显示系统和方法。
背景技术
随着显示技术的进步，显示设备变得更小、更薄、更便宜、图像更清晰。然而，显示设备的基本功能基本上保持相同——显示设备形成图像，该图像对于可以看到显示设备的所有位置处的观看者在同一时间看起来是相同的。
发明内容
根据示例性实施例，提供了一种显示系统，其包括一个或多个多视图 (MV)像素，其中每个MV像素被配置为在子束(beamlet)坐标系中沿不同方向发射子束(可单独控制的光束)。该显示系统包括输入节点，该输入节点在操作中接收在观看区域坐标系中相对于MV像素定位的多个观看区域的指定。显示系统包括耦接到输入节点的处理器。处理器分别将多个内容与多个观看区域相关联。处理器在操作中确定(例如，识别、访问)在观看区域坐标系(其中指定多个观看区域)和子束坐标系(其中沿不同方向发射MV 像素子束)之间进行转换的映射。对于从多个内容生成的多个图像中的每个图像，处理器使用两个坐标系之间的映射，识别从每个MV像素指向一个观看区域以形成图像的子束的束。指向一个观看区域以形成一个图像的子束的束与指向另一个观看区域以形成另一个图像的子束的束不同。处理器输出用于MV像素的控制信令，其中控制信令定义每个束中的每个子束的颜色和亮度，以将对应的图像投影到对应的观看区域。响应于来自处理器的控制信令， (一个或多个)MV像素分别将多个图像投影到多个观看区域。
如上所述构造的显示系统使用在子束坐标系和观看区域坐标系之间进行转换的映射，在子束坐标系中沿不同方向从每个MV像素发射子束，在观看区域坐标系中指定多个观看区域。多个内容分别与多个观看区域相关联。显示系统使用该映射来识别从每个MV像素指向一个观看区域以形成从与该观看区域相关联的内容生成的图像的子束的束。显示系统能够对多个观看区域中的每个观看区域执行相同的操作，以投影从分别与多个观看区域相关联的多个内容生成的多个(例如，不同)图像。
如本文所使用的“图像”可以包括以下中的一种或多种：静态图像、图像流(例如，视频)、文本图案(例如，消息、标牌)、光照图案以及人眼可见的任何其它内容表达。
在各种实施例中，处理器通过以下方式将多个内容与多个观看区域相关联：将多个内容本身与多个观看区域相关联，或者将多个内容的多个内容描述符(例如，内容提供者、内容类型)与多个观看区域相关联。
在各种实施例中，显示系统包括用户界面设备，该用户界面设备在操作中接收多个观看区域的操作者指定并将该多个观看区域的指定发送到输入节点。用户界面设备可以包括屏幕(例如，触摸屏)，该屏幕(例如，触摸屏) 能够显示观看面积(viewing area)并响应于图形输入和文本输入中的一者或两者而在该观看面积中指定多个观看区域。例如，操作者可以在观看区域坐标系中图形地指定多个观看区域的周边(例如，通过“绘制”封闭方格)，或者文本地指定多个观看区域的坐标。
在各种实施例中，显示系统可以包括传感器，传感器被配置为识别多个观看区域并将多个观看区域的指定发送到输入节点。例如，传感器可以被配置为检测多个目标的位置，并将检测到的多个目标的位置指定为多个观看区域。多个目标可以是多个观看者本身(例如，可以向传感器做出手势的观看者)或多个观看者代理(即用于定位和/或跟踪多个观看者的元件，诸如观看者可以佩戴的标签、观看者可以携带的可跟踪的移动设备(例如，智能手机、探测棒)、可以运输观看者的运输装置(诸如车辆)、或可以表示观看者的任何其它类型的标记)。当传感器用于识别正在移动的多个目标的位置时，显示系统的输入节点可以基于识别的已经移动的多个目标的位置来接收多个新观看区域的新指定。处理器分别将多个内容与多个新观看区域相关联，并且对于从多个内容生成的多个图像中的每个图像，使用在观看区域坐标系和子束坐标系之间进行转换的映射来识别从每个MV像素指向每个新观看区域以形成图像的子束的束。显示系统能够分别将多个图像投影到多个新观看区域。可以从先前与多个(旧)观看区域相关联的多个内容，更新与多个新观看区域相关联的多个内容。
在另一方面，提供了一种显示方法，其通常对应于上述显示系统的操作。该方法通常包括六个步骤：
1)接收位于观看区域坐标系中的多个观看区域的指定，其中多个观看区域相对于一个或多个多视图(MV)像素定位，并且每个MV像素被配置为在子束坐标系中沿不同方向发射子束；
2)分别将多个内容与多个观看区域相关联；
3)确定在观看区域坐标系和子束坐标系之间进行转换的映射；
4)对于从多个内容生成的多个图像中的每个图像，使用映射，识别从每个MV像素指向一个观看区域以形成图像的子束的束，其中指向一个观看区域以形成一个图像的子束的束与指向另一个观看区域以形成另一个图像的子束的束不同；
5)输出用于MV像素的控制信令，控制信令定义每个束中的每个子束的颜色和亮度，以将对应的图像投影到对应的观看区域；并且
6)响应于控制信令，从MV像素分别将多个图像投影到多个观看区域。
附图说明
在附图中，相同的附图标记标识类似的元件。附图中元件的大小和相对位置不一定按比例绘制。
图1描绘了显示系统的实施例。
图2描绘了显示系统的处理器的实施例。
图3描绘了根据实施例的3D观看区域坐标系。
图4描绘了根据实施例的2D观看区域坐标系。
图5A描绘了用户界面设备的样本屏幕视图，该用户界面设备可用于在观看面积中相对于(一个或多个)MV像素指定多个观看区域。
图5B描绘了传感器的样本使用，该传感器基于多个目标指定多个观看区域，该多个目标的位置由该传感器识别。
图6描绘了根据实施例的子束坐标系。
图7A描绘了样本过程，在该样本过程中使用在观看区域坐标系和子束坐标系之间进行转换的映射，以识别从一个或多个MV像素指向多个观看区域以形成对应的图像的子束的束。
图7B描绘了示例，在该示例中MV像素分别将不同子束的束投影到不同观看区域，以向位于观看区域的眼睛呈现不同图像(具有不同图案的图像 1和图像2)。
图7C描绘了另一个示例，在该示例中MV像素分别将不同子束的束投影到不同观看区域，以向位于观看区域的眼睛呈现不同图像(具有不同颜色的图像1和图像2)。
图8A是描绘根据一个实施例的显示方法的流程图，该显示方法接收多个观看区域的指定并将多个图像投影到多个观看区域。
图8B是样本算法的流程图，该样本算法可以用于应用从观看区域坐标系到子束坐标系的映射，从而识别子束的束。
图8C是样本算法的流程图，该样本算法可以用于应用从子束坐标系到观看区域坐标系的映射，从而识别子束的束。
图9A和9B各自图示了投影仪形成的MV像素的实施例，该投影仪包括能够分别沿不同方向发射多个子束的投影仪像素。
图9C是光源和透镜的组合形成的MV像素的另一个实施例，透镜能够将来自光源的光拆分成沿不同方向的多个子束。
图10A和10B图示了当观看区域从旧位置移动到新位置时更新传送到多个观看区域的图像。
具体实施方式
在以下描述中，出于解释的目的，阐述了许多具体细节以便提供对本发明的透彻理解。然而，对于本领域技术人员显而易见的是，可以在没有这些具体细节的情况下实践本发明。在其它情况下，公知的电路、结构和技术未详细示出，而是以框图示出，以避免不必要地模糊对本描述的理解。因此，阐述的具体细节仅仅是示例性的。特定的实施方式可以不同于这些示例性的细节，并且仍然被认为是在本发明的范围内。描述中对“一个实施例”或“实施例”的引用意指结合该实施例描述的特定特征、结构或特性被包括在本发明的至少一个实施例中。位于本描述中的各个地方的短语“在一个实施例中”不一定指代相同的实施例。
图1是描绘显示系统10的实施例的系统图。显示系统10包括一个或多个多视图(MV)像素12(在所示示例中包括十二个MV像素12a-12l)，其中每个MV像素12被配置为在子束坐标系42中沿不同方向发射子束14，如图6所示。如本文所使用的“子束”意指从MV像素发射的可单独控制的光束。图6图示了MV像素12a-12l中的一个沿多个方向发射多个子束14。与发射若干光束以在屏幕上形成图像的图像投影仪不同，来自每个MV像素12 的子束14旨在落在多个观看者的眼睛上，使得多个观看者分别看到源自相同 MV像素12的不同子束(例如，以不同的颜色和亮度)。结果，从观看者的视角来看的每个MV像素12的外观取决于观看者看向MV像素12的角度。为了便于说明，在图6中MV像素12h被描绘为发射几个子束14，但是应当理解，可以从MV像素12h和任何其它MV像素12发射更多的子束14。
返回参考图1，显示系统10包括输入节点16，其在操作中接收位于观看区域坐标系40中的多个观看区域18a(“区域1”)和18b(“区域2”)的指定，另外如图3所示。输入节点16允许经由包括有线和/或无线介质的任何合适的介质以及经由任何合适的协议(例如，蓝牙、WiFi、蜂窝、光学、超声波)，从其它设备或系统(例如，UI设备、传感器、储存设备、内容服务器)接收信息、数据和/或信令。
图3图示了两个观看区域18a和18b，分别被指定为相对于一个或多个 MV像素12a-12l定位的三维体积(例如，方格)。每个观看区域18定义观察点，在该观察点处由一个或多个MV像素12a-12l形成的图像是可见的。因此，观看区域18可以被定义为三维体积(3D观察点的集合)、二维面积(2D观察点的集合)或点。
观看区域坐标系40可以是任何合适的坐标系，诸如笛卡尔坐标系或极坐标系，在观看区域坐标系40中多个观看区域被定位成例如围绕一个或多个 MV像素。可以使用任何合适的3D空间建模方法来定义观看区域坐标系40，诸如地图、点云、线多边形网格和纹理多边形网格。在一些实施例中，观看区域坐标系40可以基于其中定义了多个观看区域18的观看面积的物理尺寸。
在一些实施例中，观看区域坐标系40可以在附接到MV像素的3D传感器(例如，深度传感器、立体相机)的视线内，并且观看区域坐标系40可以是3D传感器的3D坐标系。例如，3D传感器(例如，立体相机)扫描真实 3D环境以导出3D观看区域坐标系40，其中可以指定多个观看区域。
在其它实施例中，观看面积可以在附接到MV像素的2D相机的视线内，其中2D相机用作识别多个观看区域的传感器。在这种情况下，观看区域坐标系40是基于2D相机的2D像素坐标系。例如，图4图示了2D样本观看区域坐标系40'，其可以基于2D相机(未示出)的2D像素坐标系。在该示例中，2D观看区域坐标系40'设置在距一个或多个MV像素12a-12l距离D的平面上。可以在2D观看区域坐标系40'中指定点18c或面积18d以表示观看区域。应注意，2D观看区域坐标系40'可以是不同于平面的形状，诸如半球或其它非平面表面。在一些实施例中，可能期望2D观看区域坐标系40'中的每个点对MV像素12a-12l具有唯一的观看角度，使得可以唯一地识别指向每个观看区域的子束的束(bundle)，该每个观看区域由每个具有唯一观看角度的那些点中的一个或多个点形成。然后，2D观看区域坐标系40'中的多个非重叠观看区域可以与互相排斥的子束的束相关联(或由互相排斥的子束的束“击中(hit)”)。
可以以各种方式指定多个观看区域18。根据一些实施例，显示系统10 可以包括用户界面(UI)设备20，其在操作中接收多个观看区域18的操作者指定并且将多个观看区域的指定发送到输入节点16，如图1所示。图5A 图示了包括屏幕22(例如，触摸屏)的样本UI设备20，该屏幕22能够显示在观看区域坐标系40中的相对于一个或多个MV像素12a-12l的观看面积23 的表示。这些实施例中的UI设备20可以是平板计算机(如图5A所示)、膝上型或台式计算机、或包括屏幕的任何电子设备(例如，智能手机)中的任何一种，并且能够运行观看区域指定应用，该观看区域指定应用被配置为允许在观看面积23中指定多个观看区域18。操作者可以经由屏幕22(例如，触摸屏)或键盘或UI设备20的任何其它输入设备(未示出)在观看区域坐标系40下的观看面积23中指定观看区域。
操作者可以例如通过“绘制”表示观察点或表示(例如，包围)观察点的集合的点、2D形状(例如，多边形、圆形、椭圆形、自由形状)和/或3D 形状(例如，方格、球体)来图形地指定每个观看区域。在图5A所示的示例中，操作者绘制了包围观察点的集合的3D形状方格24，特定图像应该从其可见。图形地输入的多个观看区域18可以表示为叠加在UI设备20的屏幕上的观看面积23上的形状或其它标记。附加地或替代地，操作者可以通过文本指定多个观看区域18，例如，通过经由UI设备20的键盘输入方格24的顶点(P1-P8)的坐标，该坐标定义了每个观看区域。
在一些实施例中，例如，当操作者可能不需要可视化观看面积以指定多个观看区域时，UI设备20不需要包括能够显示观看面积的屏幕。在这些实施例中，UI设备20仅需要包括被配置为接收多个观看区域的操作者指定的组件。该组件可以是但不限于键盘或小键盘，操作者可以在其上键入对应于观看区域的指示(例如，座位号、区段号)；麦克风，操作者可以向其中讲述观看区域的指示；触摸/手势敏感板，操作者可以在其上轻击/手势表示观看区域的指示；光学指针，操作者可以用其指向观看面积以指定每个观看区域，等。
根据其它实施例，显示系统10可以包括传感器26，传感器26被配置为识别多个观看区域18并将多个观看区域的指定发送到输入节点16，如图1 所示。图5B示出了样本传感器26，其可以识别(例如，检测)多个目标28a 和28b的位置，并将所识别的多个目标28a和28b的位置指定为观看区域坐标系40中的多个观看区域18a和18b。传感器26可以基于任何合适的传感技术，包括但不限于光学传感器(例如，相机、摄像机、红外传感器)、能够跟踪活动对象的电磁(EM)询问系统传感器、能够跟踪活动对象的GPS系统传感器、RF传感器(例如，包括能够询问RFID标签的读取器的RFID系统)，基于RF三角测量技术的传感器和雷达传感器。在一些实施例中，可以使用多个传感器，这些传感器相对于彼此并且相对于观看面积23适当地定位，以识别可以在观看面积23中指定的多个观看区域。可以一起使用相同类型或不同类型的多个传感器。
例如，具有合适的透镜和照明的一个或多个相机可以用作能够辨识和定位多个目标28以对应地指定多个观看区域18的传感器。在一些实施例中， (一个或多个)相机可以是深度感知相机，诸如结构光或飞行时间相机，其可以生成在短距离通过相机正看到的内容的深度地图。然后可以处理深度地图以近似正看到的内容的3D表示。在其它实施例中，(一个或多个)相机可以是立体相机和/或LIDAR传感器。
在图5B所示的示例中，传感器26检测潜在观看者的位置作为多个目标 28a和28b，并将检测到的观看者的位置指定为多个观看区域18a和18b。例如，可以为每个检测到的目标28分配点、2D形状和/或3D形状(例如，包围目标28的3D方格)，并且该分配的点、2D形状和/或3D形状可以用于指定目标28的观看区域18。可以由传感器26的处理器和/或显示系统10的处理器50执行基于传感器26所识别的多个目标28a、28b的位置来指定多个观看区域的处理，这将在下面描述。
在进一步的实施例中，传感器可以被配置为识别(例如，获取)观看区域的属性，诸如音频(例如，由观看者或观看者代理做出的语音或其它声音)、温度(例如，从观看者或观看者代理发出的热量)等。所识别的属性可以例如由处理器50的区域和内容关联模块36(这将在下面描述)使用以选择或生成用于观看区域的适当内容(例如，在高温观看区域中为观看者选择/生成的冷饮广告)。
图6示意性地描绘了子束坐标系42，其可以是任何合适的坐标系，诸如笛卡尔坐标系和极坐标系。子束坐标系42识别从每个MV像素12发射的每个子束，其遵循具体的传播路径。例如，每个子束的传播路径可以由MV像素中的子束原点和定义其传播方向的(单位)矢量来定义，或者可以由角度 (诸如由子束形成的方位角α和高度角β)的组合来表征。作为进一步的示例，可以使用任何合适的3D空间建模方法来定义子束坐标系42中的子束的传播路径，诸如指定形成每个传播路径的数据点的集合的点云方法或者指定形成每个传播路径的体元(具有单位xyz尺寸的体积)的集合的体元数据方法。可以使用其它3D建模方法，诸如3D地图、线多边形网格和纹理多边形网格。在一些实施例中，如图6所示，子束坐标系42通过每个MV像素12a 中的子束的原点15a、15b、15c……明确地识别每个子束，其中每个子束的原点与其传播路径隐式地相关联。在其它实施例中，子束坐标系42可以明确地识别子束的每个传播路径。
在一些实施例中，可以基于一个或多个MV像素的几何模型查找每个子束的传播路径。例如，MV像素的几何定义以及MV像素的子束之间的关系可以在工厂中经由校准测量查找，或者可以从MV像素的光机械设计推断，诸如MV像素中包括的透镜的已知径向畸变。在各种实施例中，每个MV像素中的子束(例如，子束的源)以几何阵列(例如，2D阵列、圆形阵列)布置。以几何阵列布置的子束的传播路径可以使用任何合适的数学技术几何地定义，包括但不限于线性内插、线性外推、非线性内插、非线性外推、泰勒级数近似、参考系的线性变化、参考系的非线性变化、多项式、球形和/或指数模型以及三角操作。作为特定示例，一旦所选择的子束的传播路径被几何地定义，则可以使用合适的内插技术来查找那些几何地定义的子束之间的子束传播路径。在其它实施例中，可以通过以下方式查找每个子束的传播路径：通过MV像素上的闪烁图案(例如，通过选择性地打开和关闭每个MV像素上的子束)来唯一地编码每个子束，并使用放置在MV像素的观看面积中的相机捕获闪烁图案的图像。然后可以将捕获的图像绘制到子束坐标系42上，以几何地定义子束的相应传播路径。可以使用各种编码图案作为闪烁图案，包括但不限于格雷码图案、不归零(NRZ)数字序列、幅移键控(ASK)比特、最大长度序列以及移位寄存器序列。
尽管子束14在附图中被描绘为具有指示其发射方向的箭头的简单线，但是它们可以具有角度分量并且可以是任何形状。因此，将子束表征为简单线是一种近似，其在一些实施例中是有效的模型，但是在其它实施例中，子束可以被建模为例如具有与探照灯的光束类似的形状。在各种示例性实施例中，每个子束14足够宽/大，使得观看者的两只眼睛预期在子束14内，并且子束 14落在观看者的两只眼睛上。因此，观看者用两只眼睛看到相同的子束14 (例如，相同的颜色和亮度)。在其它实施例中，每个子束14足够窄/小，使得分别控制两个不同的子束14落在观看者的两只眼睛上。在这种情况下，观看者用他/她的两只眼睛分别看到颜色和/或亮度可能不同的两个子束14。
返回图1，显示系统10包括耦接到输入节点16的处理器(控制器)50。另外参考图2，处理器50可以是通用计算机，除了其它任务之外，其能够执行操作系统、执行设备驱动程序以及执行结合本发明的各种实施例使用的专用应用软件。在一些实施例中，处理器50可以是专用处理器。尽管处理器 50被示为单个设备，但是在一些实施例中，处理器50的功能可以分布在可以或可以不被表征为处理器的多个设备中。
处理器50能够在处理器可访问的存储器35中填充、更新、使用和管理数据，该存储器35在图2中被示为处理器50的一部分，但是在一些实施例中可以在处理器50的外部提供该存储器35。简而言之，存储器35是易失性储存设备(例如，RAM)和/或非易失性非暂时性储存设备(例如，ROM、 EPROM、EEPROM、(一个或多个)硬盘驱动器、(一个或多个)闪存驱动器或其它固态存储器技术、CD-ROM、DVD)，其能够储存任何其它信息、数据、设备驱动程序(例如，用于将控制信令54发送到一个或多个MV像素12) 以及专用应用软件，当执行时，使处理器50能够执行如本公开中描述的各种计算和处理。虽然存储器35被示为单个设备，但是在各种实施例中，存储器35可以被分成多个储存设备。
处理器50经由输入节点16例如从UI设备20(参见图5A)或从传感器 26(参见图5B)接收对多个观看区域18a和18b的指定。
处理器50将多个内容与多个观看区域18a和18b相关联。这可以通过以下方式完成：将多个内容本身与多个观看区域18a和18b相关联，或者将多个内容描述符(诸如多个内容提供者(例如，有线频道、电影频道、直播源、新闻网站、社交网站)或多个内容类型)与多个观看区域18a和18b相关联。
处理器50确定(例如，识别、访问)在观看区域坐标系40和子束坐标系42(图6)之间进行转换的映射。在各种实施例中，观看区域坐标系40和子束坐标系42之间的映射被生成并储存(或预先储存)在处理器50可以访问的存储器35中。在其它实施例中，处理器50可以在运行期间使用实时校准过程生成在观看区域坐标系40和子束坐标系42之间的映射。
映射可以采用各种形式中的任何一种，诸如在一个或多个转换函数中表达的表或数学关系。在一些实施例中，映射可以基于在观看区域坐标系40和子束坐标系42中定义的参考标记(例如，点、线、形状)的配准。例如，附接到一个或多个MV像素12的第一相机用于捕获MV像素12的观看面积23 的图像。包括第二相机和光源(例如，LED)的配准设备(未示出)放置在观看面积中，并且该光源是闪烁的，其由MV像素12的第一相机捕获。由第一相机成像的观看面积中的闪烁光的位置可以用作观看区域坐标系40中的参考(其可以基于第一相机的坐标系)。编码图案(例如，格雷码图案、非归零(NRZ)数字序列、幅移键控(ASK)比特、最大长度序列、移位寄存器序列)在一个或多个MV像素上闪烁(通过选择性地打开和关闭每个MV像素上的子束)以唯一地编码从每个MV像素发射的每个子束。可以识别由放置在观看面积中的配准设备的第二相机捕获的来自每个MV像素的子束(因为每个子束被唯一地编码)并且将其用作子束坐标系42中的参考。可以在配准设备移动到观看面积中的不同位置的情况下重复相同的过程，从而获得观看区域坐标系40中的参考的集合和子束坐标系42中的参考的集合。可以查找在两个坐标系40和42之间进行转换的映射，以便在两个坐标系中配准、对齐或以其它方式关联这两个参考的集合。也可以使用图像处理中的任何其它配准技术(诸如自动3D点云配准)来执行配准。
如图7A所示，对于从多个内容生成的多个图像(“图像1”和“图像2”) 中的每一个，处理器50使用(应用)上面确定(例如，识别、访问、生成) 的映射，识别从每个MV像素12a-12l指向一个观看区域18以形成图像的子束14的束。如图所示，每个束52a或52b包括子束14，该子束“击中”瞳孔 28a'或28b'并且扩散到观看者28a或28b的视网膜28a"或28b"以在每个观众的大脑中形成“图像1”或“图像2”。指向一个观看区域18a中的瞳孔28a' 以在观看者28a的大脑中形成一个图像“图像1”的子束14a的束52a与指向另一个观看区域18b中的瞳孔28b'以在观看者28b的大脑中形成另一个图像“图像2”的子束14的束52b不同。如图1所示，处理器50输出用于MV 像素12a-12l的控制信令54。控制信令54定义每个束52中的每个子束14的颜色和亮度(以及根据需要的任何其它成像参数)，以将对应的图像投影到对应的观看区域18。响应于来自处理器50的控制信令54，MV像素12a-12l分别将多个图像投影到多个观看区域。
图7B和7C描绘了其中MV像素12a-12l用于为位于两个观看区域的两个不同观看者形成两个不同图像的示例。在图7B和7C中，每个MV像素被分成两个区段(例如，12a-1和12a-2)，并且假设第一区段(12a-1、12b-1、 12c-1及以下等等)发射指向观看者(或观看者的眼睛)28a所位于的第一观看区域的子束，而第二区段(12a-2、12b-2、12c-2及以下等等)发射指向观看者(或观看者的眼睛)28b所位于的第二观看区域的子束。控制信令54定义每个束中的每个子束14的颜色和亮度，以将对应的图像投影到对应的观看区域。
在图7B中，形成矩形图案的十(10)个MV像素(12a-12d、12e、12h 和12i-12l)的第一区段向观看者28a的眼睛发射具有由“阴影线”表示的颜色和亮度的子束，使得观看者28a看到具有图案1的图像1。六(6)个MV 像素(12b-12c、12f-12g、12i和12l)的第二区段向观看者28b发射具有由“斑点”表示的颜色和亮度的子束，使得观看者28b看到具有与图像1的图案1 不同的图案2的图像2。
在图7C中，所有十二(12)个MV像素(12a-12l)的第一区段向观看者28a的眼睛发射具有由“R”表示的颜色和亮度的子束，使得观看者28a看到红色的图像1。所有十二(12)个MV像素(12a-12l)的第二区段向观看者28b发射具有由“G”表示的颜色和亮度的子束，使得观看者28b看到绿色的图像2。
在这些示例中的每一个中，识别将“击中”一个观看区域的子束14的束，并且通过控制信令54设置束中的每个子束的颜色和亮度以对应于与该观看区域相关联的内容，以便基于该观看区域处的内容形成图像。
如本文所使用的，“图像”意指由来自一个或多个MV像素12的照明图案产生的任何事物。通过“打开”或“关闭”从每个MV像素12发射的每个子束和/或控制每个子束的颜色和亮度(强度)来生成照明图案。图像的非限制性示例包括以下中的任一个或组合：静态图像、图像流(例如，视频)、文本图案(例如，消息、标牌)、光照图案(例如，子束单独地或共同地时闪时灭，例如以不同或变化的速度、以不同的亮度/暗度水平、以不同的亮度/暗度增加或减少的速率等闪烁，或以其它方式“打开”和“关闭”)以及人眼可见的任何其它内容表达。
在一些实施例中，除了颜色和亮度之外，控制信令54还可以定义每个子束14的其它参数，诸如光谱成分、偏振、子束形状、子束轮廓、焦点、空间相干性、时间相干性以及与其它子束的重叠。具体地，子束通常不具有尖锐边缘，并且因此相邻子束可能稍微重叠。可以由子束参数中的一个来控制重叠程度。
用于MV像素12的控制信令54可以经由包括有线和/或无线介质的任何合适的介质并且经由任何合适的协议(例如，蓝牙、Wi-Fi、蜂窝、光学、超声波)从处理器50输出。
图2示出了根据一个实施例的显示系统10的处理器50的细节，并且图 8A是图示了可以由处理器50结合一个或多个MV像素12执行的样本方法的流程图。下面将详细描述的图2的处理器50中的各种组件32、34、36和38 可以由硬件、软件或硬件和软件的组合来实现，并且每个组件可以部分或全部由电路、通用处理器或执行软件算法的专用处理器实现。
在图8A的框81中，处理器50接收对位于观看区域坐标系40中的多个观看区域18的指定，其中多个观看区域相对于一个或多个多视图(MV)像素12定位。
在处理器50中，观看区域处理器32负责处理经由输入节点16接收的对多个观看区域18的指定。在一些实施例中，经由输入节点16接收的多个观看区域18可以在观看区域坐标系40中明确定义，例如，当操作者在UI设备 20上指定多个观看区域18时。在其它实施例中，经由输入节点16接收的多个观看区域18可以被隐式地定义，例如，以由传感器26识别的多个目标的位置的形式。在这些实施例中，观看区域处理器32接收所识别的多个目标的识别位置，并执行任何必要的处理以基于识别位置明确指定多个观看区域18，诸如通过定义对应于每个识别位置的点、2D形状或3D形状。观看区域处理器32可以使用若干图像处理技术中的任何一种来处理(例如，辨识)由传感器26识别的多个目标的位置，诸如拼接/配准、形态滤波、阈值处理、像素计数、图像分割、面部检测、边缘检测以及斑点(blob)发现和操纵。观看区域处理器32基于处理(例如，辨识)的多个目标的位置指定多个观看区域。在各种实施例中，多个观看区域可以储存在存储器35中以便可由处理器50 的各种组件访问。
在图8A的框82中，处理器50分别将多个内容与多个观看区域18相关联。在处理器50中，运行关联应用的区域和内容关联模块36负责执行关联。为此，存储器35可以储存多个内容和/或多个内容的内容描述符。例如，多个内容或内容描述符可以储存在联网在一起的一个或多个内容服务器中，这些内容服务器共同地用作可由处理器50访问的存储器35的一部分。
可以储存多个内容本身(基于其可以生成图像)，或者可以储存可以用于例如经由网络连接访问多个内容的内容描述符(例如，内容提供者、内容类型)。在这些实施例中，区域和内容关联模块36可以为每个观看区域选择特定内容或内容描述符。在其它实施例中，区域和内容关联模块36可以为每个观看区域创建(生成)特定内容。
在区域和内容关联模块36上运行的关联程序分别负责为多个观看区域提取或创建多个内容。关联程序可以参考定义的关联规则以将多个观看区域 18与多个内容相关联。例如，规则可以用于基于观看区域的特性为每个观看区域选择或创建特定内容，或者如果传感器26用于检测目标(例如，观看者或观看者代理)的位置以指定观看区域，则规则可以用于基于目标的特性为每个观看区域选择或创建特定内容。作为具体示例，多个内容可以与观看区域相对于一个或多个MV像素12的位置相关联，使得可以基于那些内容生成被具体选择为适合于在该位置处显示的图像。作为另一个示例，多个内容与观看区域处的目标(例如，观看者)相关联，使得可以基于那些内容生成被具体选择为适合于该目标的图像。
在进一步的实施例中，经由输入节点16接收的多个观看区域18的指定可以分别与多个内容相关联。例如，当UI设备20被用于指定多个观看区域 18时，UI设备20可以另外用于基于例如操作者对UI设备20的输入而分别将指定的观看区域18与多个内容相关联。在这些实施例中，处理器50的区域和内容关联模块36接收和/或验证经由输入节点16接收的观看区域18和多个内容之间的关联。
在一些实施例中，可以由区域和内容关联模块36实时生成要与多个观看区域18相关联的多个内容。例如，在区域和内容关联模块36上运行的关联应用可以例如根据观看区域的特性实时为每个观看区域生成内容(例如，标牌、光照图案)。
在图8A的框83中，处理器50确定(例如，识别、访问、生成)在观看区域坐标系40和子束坐标系42之间进行转换的映射。在各种实施例中，映射可以储存(或预先储存)在存储器35中，在这种情况下，处理器50访问储存的映射。在处理器50中，映射引擎34负责确定(例如，识别、访问、生成)映射。
多个映射(例如，从观看区域坐标系40转换到子束坐标系42的一个映射，以及从子束坐标系42转换到观看区域坐标系40的另一个映射)可以储存在存储器35中，并且映射引擎34可以从其中选择性地访问一个或多个合适的映射。在各种实施例中，映射引擎34确定(例如，访问)(一个或多个) 映射，并且下面将描述的子束束(beamlet-bundles)识别模块38应用该(一个或多个)映射来识别击中每个观看区域的子束的束。
如上所述，观看区域坐标系40和子束坐标系42之间的映射可以预先储存在存储器35中，或者可以在适当的定时经由输入节点16被接收到存储器 35中。例如，当UI设备20用于指定多个观看区域18时，由在UI设备20 上运行的观看区域指定应用所使用的观看区域坐标系40可以用于生成映射，该映射可以经由输入节点16从UI设备20与多个观看区域18的指定一起被接收。
在图8A的框84中，对于从多个内容(由区域和内容关联模块36在框82中与多个观看区域相关联)生成的多个图像中的每个图像，处理器50使用映射(由映射引擎34在框83中确定/识别/访问/生成)，识别从每个MV像素指向一个观看区域以形成图像的子束的束。在处理器50中，运行束识别应用的子束束识别模块38负责应用该映射以识别分别指向多个观看区域18a、18b以形成多个图像的子束的多个束52a、52b(参见上面描述的图7A、7B 和7C的示例)。通常，对于每个图像，束识别应用识别在相应观看区域上/ 中“击中”或“着陆(land)”以形成图像的子束的束。
图8B是样本算法的流程图，子束束识别模块38可以使用该样本算法来应用从观看区域坐标系40到子束坐标系42的映射，从而识别指向多个观看区域中的每个观看区域的子束的束。对于多个观看区域中的每个观看区域，在框87中，定义观看区域的顶点。参考图5A，例如，对于由方格24定义的观看区域，定义顶点P1-P8。在框88中，对于每个MV像素，将映射(从观看区域坐标系到子束坐标系)应用于每个顶点以识别“击中”观看区域的每个顶点的最外面子束。如本文所使用的，最外面意指朝向MV像素的外周边。在框89中，对于每个MV像素，查找由击中顶点的最外面子束形成边界的任何其它子束也“击中”观看区域。
图8C是样本算法的流程图，子束束识别模块38可以使用该样本算法应用从子束坐标系42到观看区域坐标系40的映射，从而识别指向多个观看区域中的每个观看区域的子束的束。对于每个MV像素的每个子束，在框90 中，应用映射(从子束坐标系到观看区域坐标系)以识别子束“击中”哪个观看区域。在评估每个MV像素的所有子束之后，每个观看区域与来自MV 像素的“击中”该观看区域的子束的集合相关联。
在图8A的框85中，处理器50生成用于MV像素12a-12l的控制信令 54，其中控制信令定义每个束中的每个子束的颜色和亮度，以将对应的图像投影到对应的观看区域。例如，控制信令54可以为每个子束定义YCbCr或 RGB空间中的颜色(例如，全调色板的可能颜色)，包括透明度值(“α”)，以及带有亮度值(“L”)的亮度。
在图8A的框86中，响应于来自处理器50的控制信令54，一个或多个 MV像素12a-12l分别将多个图像投影到多个观看区域。
在一些实施例中，形成一个图像的子束的束和形成另一个图像的子束的束彼此互相排斥。例如，参考图7A -7C，映射到观看者将看到“图像1”的观看区域的子束的束52a与映射到观看者将看到“图像2”的观看区域的子束的束52b彼此互相排斥。在其它实施例中，某些子束可以例如在图像的边缘附近由多个图像(即，由多个束)共享，以实现混合效果或避免观看区域之间的间隙。
一个或多个MV像素12a-12l可以以各种配置中的任何一种形成。图9A、 9B和9C图示了MV像素的三个非限制性示例性配置。图9A是投影仪61形成的MV像素12x的简化表示，投影仪61包括多个投影仪像素(“PIX”)，每个投影仪像素沿特定方向发射子束14。在所示的示例中，包括二十(20) 个投影仪像素PIX 1-PIX 20，每个投影仪像素被配置为沿不同方向发射子束 14。因此，分别从十二个投影仪像素PIX 1-PIX 20发射的12个子束14-1-14-20 沿二十个不同方向延伸。来自每个投影仪像素PIX的每个子束的颜色和亮度是可独立控制的。可以使用任何合适的投影仪(例如，LCD、DLP、LCoS) (诸如“微型投影仪”)来形成MV像素12x。在各种实施例中，可以使用包括256(＝16×16)个投影仪像素到数百万或更多投影仪像素的投影仪，包括但不限于：
VGA：640x480＝307,200个投影仪像素
XGA：1024x768＝786,432个投影仪像素
720p：1280x720＝921,600个投影仪像素
1080p：1920x1080＝2,073,600个投影仪像素
UHD4K：3840x2160＝8,294,400个投影仪像素
适用于形成MV像素的各种微型投影仪是可商购的。简而言之，微型投影仪包括光源(例如，LED、激光、白炽灯)；收集光学器件，其将光线引导到成像器；成像器，通常是DMD(数字微镜设备)或LCoS(硅上液晶)设备，其接受数字显示信号以遮断(shutter)光并将光引导到投影光学器件；投影(或输出)光学器件，其将显示图像投影在屏幕上，并且还允许附加功能，诸如聚焦显示图像；和控制电子器件，包括光源驱动器、接口电路以及视频和图形处理器。在一些实施例中，可以修改现成的微型投影仪以用作MV 像素，例如，与传统的投影应用相比，降低亮度(因为子束14旨在由观看者的眼睛接收)。来自处理器50的控制信令54激活一个或多个MV像素12x，以从每个MV像素生成沿不同方向传播的子束14，每个子束的颜色和亮度是受控的。
图9B是投影仪形成的另一个MV像素12y的表示，其比图9A的表示更详细。MV像素12y包括由投影仪像素“PIX”组成的投影仪像素阵列62、光源63和透镜64。在所示示例中，投影仪像素阵列62(例如，DMD或LCoS 设备)包括256(＝16×16)个投影仪像素PIX 1-PIX256。光源63被描绘为位于投影仪像素阵列62的后面，但是在其它实施例中，光源63可以根据所使用的投影技术设置在投影仪像素阵列62的前面。当来自处理器50的控制信号54激活所选择的投影像素“PIX”时，从光源63照射在那些投影像素上的光被朝向透镜64引导(经由反射或透射)，透镜64从接收的光生成子束。如图所示，投影像素PIX 84在被激活时将来自光源63的光朝向透镜64引导，透镜64收集相当大部分的光并将其准直成子束84中。类似地，投影像素PIX 94在被激活时将来自光源63的光朝向透镜64引导，透镜64收集相当大部分的光并将其准直成子束94中。因为投影像素PIX 84和PIX 94相对于透镜 64具有不同的角度取向(沿1个或2个方向)，所以它们各自的子束84和子束94的发射方向将彼此不同。例如，如果投影像素PIX 84在激活时通过蓝光，那么其眼睛接收子束84的观看者将看到蓝点。例如，如果投影像素PIX 94在激活时通过红光，那么其眼睛接收子束94的观看者将看到红点。点的大小/形状/外观可以根据透镜64的配置和操作而变化。结果，每个子束(子束1-子束256)不仅在颜色和/或强度方面而且在大小、形状和/或外观方面可以与一些或所有其它子束不同。当投影像素“PIX”每个仅发射三原色(RBG) 中的一个时，漫射器可以位于投影像素的集合的前面，以便漫射从该集合发射的光，从而将从该集合发射的光混合在一起成为从全调色板的可能颜色中选择的颜色的单个子束。在各种实施例中，每个投影像素由三原色“子”像素组成，并且漫射器用于将三原色“子”像素混合在一起成为全调色板颜色的投影像素。
在其它实施例中，如图9C所示，MV像素12z可以由显示面板(例如， LED、OLED)66形成，在该显示面板上放置透镜或透镜阵列64'。每个显示面板像素用作可单独访问的光源，当由来自处理器50的控制信令54电激励时，该光源发光。在所示的示例中，显示面板像素的4×5阵列用作二十个光源LS 1-LS 20，在其上放置二十个透镜L1-L20的4×5阵列64'。来自显示像素LS 1的光被透镜L1收集并准直成子束14-1，来自显示像素LS 2的光被透镜L2收集并准直成子束14-2，来自显示像素LS 3的光被透镜L3收集并准直成子束14-3，等等，以生成沿20个不同方向传播的20个子束14-1-14-20。包括用作可单独访问的光源的显示面板像素(LS 1-LS 20)的显示面板66可以统称为光源，并且透镜阵列64'可以统称为透镜。因此，图9C的MV像素 12z可以被认为是光源和透镜的组合，其被配置为将来自光源的光拆分成沿不同方向的多个子束。光源和透镜的配置不限于图9C所示的特定实施例，这对于本领域技术人员来说是显而易见的。例如，可以使用能够时分地或空分地发射多个光线的单个光源来代替显示面板66，并且可以使用透镜或透镜阵列的其它布置来代替图9C的透镜阵列64'。在图9C中，透镜阵列64’示出为在空间中漂浮，并且未示出支撑结构。实际上，透镜L1-L20可以例如由暗片支撑，暗片不仅提供机械支撑而且提供不透明背景，并且可以阻挡来自显示面板66的杂散光。在来自显示板66的光中，只有穿过透镜L1-L20的子束 14才会到达观看者的眼睛。
用于形成MV像素的透镜阵列和显示面板组合可以在概念上与投影仪的构造方式类似地实现。例如，可以使用LCD或OLED面板，其中LCD/OLED 面板的像素在功能上类似于DLP/LCoS投影仪上的投影仪像素。使用 LCD/OLED面板，可以在其前面放置多于一个镜头，从而在单个显示面板中创建多个“投影仪”。每个透镜下方的显示面板像素将形成从该透镜出射的子束。每个透镜下方的显示面板像素的数目确定每个MV像素“投影仪”的可控子束方向的数目。
在更进一步的实施例中，各个灯(例如，LED、聚光灯)的集合(每个灯指向不同方向并且每个灯是可单独访问的)可以被组合在一起以形成MV 像素，其发射源自沿不同方向的不同光的多个子束。
返回参考图5B，传感器26可以用于检测正在移动的多个目标(例如，多个观看者28a、28b)的位置，并将新检测到的多个目标的位置指定为多个新观看区域。然后，处理器50可以更新多个内容，使得可以从更新后的多个内容生成新图像以在多个新观看区域处可见。图10A和10B图示了这样的实施例。
在图10A和10B中，由传感器26识别的多个目标不是多个观看者28a、 28b本身，而是多个观看者代理60a、60b，即用于定位和/或跟踪多个观看者 28a、28b的元件，诸如观看者可以佩戴(例如，包含在徽章、腕带中)的标签(例如，诸如QR码的无源图案、诸如闪烁的IRLED的有源光学标签、诸如RFID标签的无线电标签、或超声波标签)、用作观看者可以携带的可跟踪对象的移动设备(例如，智能手机、探测棒)、可以运输观看者的运输装置(诸如车辆)，或可以表示观看者的任何其它类型的标记。传感器26被配置为使用诸如RFID技术、EM询问技术或GPS技术之类的任何合适的定位科技或技术来检测观看者代理60a、60b的位置。当传感器26用于检测从图10A中的原始位置移动到图10B中的新位置(如箭头68a、68b所示)的多个目标 28a、28b(经由观看者代理60a、60b)的位置时，显示系统10的输入节点 16可以基于新检测到的位置接收多个新观看区域的新指定。处理器50分别将多个内容与多个新观看区域相关联，并且对于从多个内容生成的多个图像中的每个图像，使用在子束坐标系42和观看区域坐标系40之间进行转换的映射来识别从每个MV像素指向每个新观看区域以形成图像的子束的束。显示系统10能够分别将多个图像投影到多个新观看区域。
在一些实施例中，可以从先前与多个(旧)观看区域相关联的多个内容更新与多个新观看区域相关联的多个内容。例如，在图10A中，将从旧内容生成的毛毛虫70a的图像投影到观看者28a的旧观看区域，并且将从旧内容生成的蝌蚪70b的图像投影到另一个观看者28b的旧观看区域。在两个观看者28a、28b移动到新位置之后，在图10B中，从更新内容生成的蝴蝶80a的不同(更新的)图像被投影到观看者28a的新观看区域，并且从更新内容生成的青蛙80b的不同(更新的)图像被投影到另一个观看者28b的新观看区域。因此，当观看者相对于一个或多个MV像素12移动时，每个观看者可以基于更新内容观察到更新或改变的图像(例如，从毛毛虫70a到蝴蝶80a，从蝌蚪70b到青蛙80b)，而不同的观看者28a、28b分别基于更新的内容观察到不同的(以及不同地更新或改变的)图像。
2017年3月24日提交的美国专利申请序列号15/469，220的公开内容整体并入本文。
可以组合上述各种实施例以提供进一步的实施例。根据以上详细描述，可以对实施例进行这些和其它改变。通常，在以下权利要求中，所使用的术语不应被解释为将权利要求限制于说明书和权利要求中公开的具体实施例，而是应该被解释为包括所有可能的实施例以及这些权利要求所赋予的等同物的全部范围。因此，权利要求不受本公开的限制。

Claims (22)

1.一种显示系统，包括：
一个或多个多视图(MV)像素，其中每个MV像素被配置为在子束坐标系中沿不同方向发射子束；
输入节点，其在操作中接收在观看区域坐标系中相对于MV像素定位的多个观看区域的指定；和
处理器，其耦接到所述输入节点，并且在操作中：
分别将多个内容与所述多个观看区域相关联；
确定在所述观看区域坐标系和所述子束坐标系之间进行转换的映射；
对于从所述多个内容生成的多个图像中的每个图像，使用所述映射，识别从每个MV像素指向一个观看区域以形成所述图像的子束的束，其中指向一个观看区域以形成一个图像的子束的束与指向另一个观看区域以形成另一个图像的子束的束不同；以及
输出用于所述MV像素的控制信令，所述控制信令定义每个束中的每个子束的颜色和亮度，以将对应的图像投影到对应的观看区域；
其中响应于来自所述处理器的控制信令，所述MV像素分别将所述多个图像投影到所述多个观看区域。
2.根据权利要求1所述的显示系统，其中从由静态图像、图像流、文本图案和光照图案组成的组中选择所述图像。
3.根据权利要求1所述的显示系统，其中所述处理器通过以下方式将所述多个内容与所述多个观看区域相关联：将所述多个内容本身与所述多个观看区域相关联，或者将所述多个内容的多个内容描述符与所述多个观看区域相关联。
4.根据权利要求1所述的显示系统，包括用户界面设备，所述用户界面设备在操作中接收所述多个观看区域的操作者指定并将所述多个观看区域的指定发送到所述输入节点。
5.根据权利要求4所述的显示系统，其中所述用户界面设备包括屏幕，所述屏幕能够显示观看面积并响应于图形输入和文本输入中的一者或两者而在所述观看面积中指定所述多个观看区域。
6.根据权利要求1所述的显示系统，包括传感器，所述传感器被配置为识别所述多个观看区域，并将所述多个观看区域的指定发送到所述输入节点。
7.根据权利要求6所述的显示系统，其中所述传感器被配置为检测多个目标的位置，并将检测到的所述多个目标的位置指定为所述多个观看区域。
8.根据权利要求7所述的显示系统，其中所述多个目标包括多个观看者和多个观看者代理中的一者或两者。
9.根据权利要求7所述的显示系统，其中，
所述输入节点在操作中：
基于检测到的已经移动的所述多个目标的位置，接收多个新观看区域的新指定，并且
所述处理器在操作中：
分别将所述多个内容与所述多个新观看区域相关联，
对于从所述多个内容生成的所述多个图像中的每个图像，使用所述映射，识别从每个MV像素指向一个新观看区域以形成所述图像的子束的束，并且
输出新控制信令，所述新控制信令定义每个束中的每个子束的颜色和亮度，以将对应的图像投影到对应的新观看区域；
其中响应于所述新控制信令，所述MV像素分别将所述多个图像投影到所述多个新观看区域。
10.根据权利要求9所述的显示系统，其中从所述多个图像被先前投影到所述多个观看区域所基于的多个内容，更新与所述多个新观看区域相关联的多个内容。
11.根据权利要求1所述的显示系统，其中形成一个图像的子束的束和形成另一个图像的子束的束彼此互相排斥。
12.根据权利要求1所述的显示系统，其中每个MV像素是投影仪，所述投影仪具有沿不同方向发射子束的投影仪像素。
13.根据权利要求1所述的显示系统，其中每个MV像素是光源和透镜的组合，其中所述透镜被配置为将来自所述光源的光拆分成沿不同方向的子束。
14.一种显示方法，包括：
接收位于观看区域坐标系中的多个观看区域的指定，其中所述多个观看区域相对于一个或多个多视图(MV)像素定位，并且每个MV像素被配置为在子束坐标系中沿不同方向发射子束；
分别将多个内容与所述多个观看区域相关联；
确定在所述观看区域坐标系和所述子束坐标系之间进行转换的映射；
对于从所述多个内容生成的多个图像中的每个图像，使用所述映射，识别从每个MV像素指向一个观看区域以形成所述图像的子束的束，其中指向一个观看区域以形成一个图像的子束的束与指向另一个观看区域以形成另一个图像的子束的束不同；
生成用于所述MV像素的控制信令，所述控制信令定义每个束中的每个子束的颜色和亮度，以将对应的图像投影到对应的观看区域；以及
响应于所述控制信令，从所述MV像素分别将所述多个图像投影到所述多个观看区域。
15.根据权利要求14所述的显示方法，其中将所述多个内容与所述多个观看区域相关联的步骤包括：将所述多个内容本身与所述多个观看区域相关联，或者将所述多个内容的多个内容描述符与所述多个观看区域相关联。
16.根据权利要求14所述的显示方法，其中接收所述多个观看区域的所述指定的步骤包括：经由用户界面设备接收所述指定，所述用户界面设备能够接收所述多个观看区域的操作者指定。
17.根据权利要求16所述的显示方法，其中所述用户界面设备包括屏幕，所述屏幕能够显示观看面积并响应于图形输入和文本输入中的一者或两者而在所述观看面积中指定所述多个观看区域。
18.根据权利要求14所述的显示方法，其中接收所述多个观看区域的所述指定的步骤包括：接收由传感器识别的所述多个观看区域。
19.根据权利要求18所述的显示方法，其中所述传感器能够检测多个目标的位置，并将检测到的所述多个目标的位置指定为所述多个观看区域。
20.根据权利要求19所述的显示方法，包括：
基于检测到的已经移动的所述多个目标的位置，接收多个新观看区域的新指定；
分别将所述多个内容与所述多个新观看区域相关联；
对于从所述多个内容生成的所述多个图像中的每个图像，使用所述映射，识别从每个MV像素指向一个新观看区域以形成所述图像的子束的束；
生成新控制信令，所述新控制信令定义每个束中的每个子束的颜色和亮度，以将对应的图像投影到对应的新观看区域；以及
响应于所述控制信令，从所述MV像素分别将所述多个图像投影到所述多个观看区域。
21.根据权利要求20所述的显示方法，包括：
从所述多个图像被先前投影到所述多个观看区域所基于的多个内容，更新与所述多个新观看区域相关联的多个内容。
22.根据权利要求14所述的显示方法，其中从由静态图像、图像流、文本图案和光照图案组成的组中选择所述图像。
CN201880020820.3A 2017-03-24 2018-03-23 用于提供多视图内容的显示系统和方法 Active CN110476148B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/469,220 2017-03-24
US15/469,220 US10269279B2 (en) 2017-03-24 2017-03-24 Display system and method for delivering multi-view content
PCT/US2018/024024 WO2018175886A1 (en) 2017-03-24 2018-03-23 Display system and method for delivering multi-view content

Publications (2)

Publication Number Publication Date
CN110476148A CN110476148A (zh) 2019-11-19
CN110476148B true CN110476148B (zh) 2022-06-21

Family

ID=63582851

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880020820.3A Active CN110476148B (zh) 2017-03-24 2018-03-23 用于提供多视图内容的显示系统和方法

Country Status (7)

Country Link
US (1) US10269279B2 (zh)
EP (1) EP3602262A4 (zh)
JP (1) JP7033606B2 (zh)
KR (1) KR102268377B1 (zh)
CN (1) CN110476148B (zh)
CA (1) CA3055222C (zh)
WO (1) WO2018175886A1 (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106462328B (zh) * 2014-06-24 2020-09-04 索尼公司 信息处理装置、信息处理方法和程序
US10275948B2 (en) * 2014-12-02 2019-04-30 Operr Technologies, Inc. Method and system for refilling a parking meter
US10427045B2 (en) 2017-07-12 2019-10-01 Misapplied Sciences, Inc. Multi-view (MV) display systems and methods for quest experiences, challenges, scavenger hunts, treasure hunts and alternate reality games
US10565616B2 (en) 2017-07-13 2020-02-18 Misapplied Sciences, Inc. Multi-view advertising system and method
US10404974B2 (en) * 2017-07-21 2019-09-03 Misapplied Sciences, Inc. Personalized audio-visual systems
WO2019034975A1 (en) * 2017-08-14 2019-02-21 Imax Theatres International Limited WIRELESS CONTENT DELIVERY FOR PAVED LED DISPLAY
US10778962B2 (en) 2017-11-10 2020-09-15 Misapplied Sciences, Inc. Precision multi-view display
CN110989949B (zh) * 2019-11-13 2023-04-11 浙江大华技术股份有限公司 一种异形拼接显示的方法及装置
JP7477616B2 (ja) 2020-01-06 2024-05-01 ミスアプライド サイエンシーズ， インコーポレイテッド 輸送ハブ情報システム
US11698549B2 (en) * 2020-03-13 2023-07-11 Misapplied Sciences, Inc. Multi-view display panel
US11474770B2 (en) 2020-03-26 2022-10-18 Misapplied Sciences, Inc. Multi-view network bridge device

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101295618A (zh) * 2007-04-25 2008-10-29 陈清华 阳极点阵显示技术
CN101563725A (zh) * 2006-12-18 2009-10-21 索尼株式会社 显示控制设备、显示控制方法和程序
CN101782824A (zh) * 2009-01-20 2010-07-21 日东电工株式会社 具有光学坐标输入装置的显示系统
CN102456526A (zh) * 2010-10-18 2012-05-16 佳能株式会社 电子束显示器
CN103369334A (zh) * 2012-03-29 2013-10-23 株式会社东芝 图像显示装置
US9396588B1 (en) * 2015-06-30 2016-07-19 Ariadne's Thread (Usa), Inc. (Dba Immerex) Virtual reality virtual theater system

Family Cites Families (68)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2846856B2 (ja) 1996-07-19 1999-01-13 三洋電機株式会社 立体映像表示装置
GB2317291A (en) 1996-09-12 1998-03-18 Sharp Kk Observer tracking directional display
AUPP496198A0 (en) 1998-07-31 1998-08-20 Resmed Limited Switches with graphical display
US7487112B2 (en) 2000-06-29 2009-02-03 Barnes Jr Melvin L System, method, and computer program product for providing location based services and mobile e-commerce
WO2002024470A1 (en) 2000-09-25 2002-03-28 The Singapore Mint Multiple image surface
US20030115096A1 (en) 2001-12-17 2003-06-19 Reynolds Randy B. Computer-controlled, remotely programmed at-shelf advertising system
AU2003210440A1 (en) 2002-01-04 2003-07-24 Neurok Llc Three-dimensional image projection employing retro-reflective screens
US6800031B2 (en) 2002-04-15 2004-10-05 Microsoft Corporation Method of conducting an interactive competition
JP3966830B2 (ja) * 2003-03-28 2007-08-29 株式会社東芝 立体表示装置
US7001023B2 (en) 2003-08-06 2006-02-21 Mitsubishi Electric Research Laboratories, Inc. Method and system for calibrating projectors to arbitrarily shaped surfaces with discrete optical sensors mounted at the surfaces
JP2005136691A (ja) 2003-10-30 2005-05-26 Fuji Photo Film Co Ltd 画像管理システム
US7369100B2 (en) 2004-03-04 2008-05-06 Eastman Kodak Company Display system and method with multi-person presentation function
US7602395B1 (en) 2005-04-22 2009-10-13 Nvidia Corporation Programming multiple chips from a command buffer for stereo image generation
GB2428153A (en) 2005-07-08 2007-01-17 Sharp Kk Interactive multiple view display
US8064414B2 (en) 2005-12-13 2011-11-22 Qualcomm, Incorporated Range extension techniques for a wireless local area network
CN101473262A (zh) 2006-06-16 2009-07-01 皇家飞利浦电子股份有限公司 多视图显示设备
IL183173A (en) 2007-05-14 2013-11-28 David Eduard Sitbon An alert system located in the aisle to indicate a safety issue
US20120268451A1 (en) * 2007-06-25 2012-10-25 Industrial Technology Research Institute Three-dimensional (3d) display
WO2009013744A2 (en) 2007-07-23 2009-01-29 Humaneyes Technologies Ltd. Multi view displays and methods for producing the same
US8228196B1 (en) 2008-07-25 2012-07-24 Sprint Communications Company L.P. Displaying advertisements based on electronic tags
WO2010038275A1 (ja) 2008-09-30 2010-04-08 Ｎｅｃディスプレイソリューションズ株式会社 送信端末、表示装置、これらを備える画像表示伝送システム、該システムで行われるデータ転送方法
KR101290013B1 (ko) 2008-10-07 2013-07-30 엘지디스플레이 주식회사 다중 뷰 영상표시장치
US8075138B2 (en) 2009-02-23 2011-12-13 Third Dimension Ip Llc System and methods for angular slice true 3-D display
WO2010102290A2 (en) 2009-03-06 2010-09-10 The University Of North Carolina At Chapel Hill Methods, systems, and computer readable media for generating autostereo three-dimensional views of a scene for a plurality of viewpoints using a pseudo-random hole barrier
JP5202448B2 (ja) * 2009-06-17 2013-06-05 シャープ株式会社 画像処理システム及び方法
US20110242298A1 (en) 2009-08-21 2011-10-06 Microsoft Corporation Private video presentation
US8854531B2 (en) 2009-12-31 2014-10-07 Broadcom Corporation Multiple remote controllers that each simultaneously controls a different visual presentation of a 2D/3D display
US8941312B2 (en) 2010-01-19 2015-01-27 Ncp Corporation Apparatus and method for controlling LED light strings
US8687051B2 (en) 2010-03-03 2014-04-01 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Screen and method for representing picture information
EP2395759B1 (en) 2010-06-11 2015-03-04 Sony Ericsson Mobile Communications AB Autostereoscopic display device and method for operating an autostereoscopic display device
US8624960B2 (en) 2010-07-30 2014-01-07 Silicon Image, Inc. Multi-view display system
JP2013540090A (ja) 2010-09-16 2013-10-31 スペックマット インコーポレイテッド 高効率かつ低コストの結晶珪素太陽電池セルのための方法、プロセス、及び製造技術
JP5302285B2 (ja) 2010-10-28 2013-10-02 シャープ株式会社 立体映像出力装置、立体映像出力方法、立体映像出力プログラムおよびコンピュータ読み取り可能な記録媒体、ならびに、立体映像表示装置
US8817080B2 (en) 2010-12-02 2014-08-26 At&T Intellectual Property I, L.P. Location based media display
US20120218253A1 (en) 2011-02-28 2012-08-30 Microsoft Corporation Adjusting 3d effects for wearable viewing devices
US20130013412A1 (en) 2011-07-08 2013-01-10 Qualcomm Incorporated Methods and Systems for Displaying GEO-Based Offers on a Mobile Advertising Display Device
JP6017124B2 (ja) * 2011-08-03 2016-10-26 東芝メディカルシステムズ株式会社 画像処理システム、画像処理装置、医用画像診断装置、画像処理方法及び画像処理プログラム
US20130093752A1 (en) 2011-10-13 2013-04-18 Sharp Laboratories Of America, Inc. Viewer reactive auto stereoscopic display
US9080279B2 (en) 2011-10-24 2015-07-14 Lg Electronics Inc. Washing machine to produce three-dimensional motion
JP2015505972A (ja) * 2011-11-09 2015-02-26 コーニンクレッカ フィリップス エヌ ヴェ 表示装置及び方法
EP2611152A3 (en) 2011-12-28 2014-10-15 Samsung Electronics Co., Ltd. Display apparatus, image processing system, display method and imaging processing thereof
EP2832100B1 (en) 2012-03-27 2019-01-02 Koninklijke Philips N.V. Multi-user autostereoscopic display with position tracking
US20130282452A1 (en) 2012-04-23 2013-10-24 Jianping He Advertisement Revenues Shared With Subscribers
KR101507756B1 (ko) 2012-04-24 2015-04-07 코닌클리케 필립스 엔.브이. 육안 입체 영상 디스플레이 디바이스 및 구동 방법
WO2013183108A1 (ja) 2012-06-04 2013-12-12 株式会社Pfu 情報処理装置、方法およびプログラム
KR20140007703A (ko) 2012-07-10 2014-01-20 삼성전자주식회사 영상 디스플레이 장치 및 메뉴 디스플레이 방법
US20140035877A1 (en) 2012-08-01 2014-02-06 Hon Hai Precision Industry Co., Ltd. Using a display device with a transparent display to capture information concerning objectives in a screen of another display device
US9989206B2 (en) 2013-03-11 2018-06-05 Inception Innovations, Llc Architectural lighting methods and apparatus
CA2917719C (en) 2013-07-11 2021-12-14 Dejero Labs Inc. Systems and methods for transmission of data streams
US20150042771A1 (en) 2013-08-07 2015-02-12 United Video Properties, Inc. Methods and systems for presenting supplemental content in media assets
KR102140080B1 (ko) 2013-09-27 2020-07-31 삼성전자주식회사 다시점 영상 디스플레이 장치 및 제어 방법
KR102220910B1 (ko) 2014-01-10 2021-02-25 엘지전자 주식회사 가전제품 및 가전제품 제어방법
US9800845B2 (en) 2014-02-07 2017-10-24 Microsoft Technology Licensing, Llc Projector-based crowd coordination and messaging
US9373306B2 (en) 2014-03-25 2016-06-21 Intel Coporation Direct viewer projection
WO2015175818A1 (en) 2014-05-16 2015-11-19 Musco Corporation Sports lighting to increase contrast
US20150356912A1 (en) 2014-06-06 2015-12-10 Microsoft Corporation Hybrid Messaging System
US9704392B2 (en) 2014-12-02 2017-07-11 Operr Technologies, Inc. Method and system for legal parking
US10701349B2 (en) 2015-01-20 2020-06-30 Misapplied Sciences, Inc. Method for calibrating a multi-view display
US11099798B2 (en) 2015-01-20 2021-08-24 Misapplied Sciences, Inc. Differentiated content delivery system and method therefor
US10955924B2 (en) 2015-01-29 2021-03-23 Misapplied Sciences, Inc. Individually interactive multi-view display system and methods therefor
US10928914B2 (en) 2015-01-29 2021-02-23 Misapplied Sciences, Inc. Individually interactive multi-view display system for non-stationary viewing locations and methods therefor
US10264247B2 (en) 2015-02-03 2019-04-16 Misapplied Sciences, Inc. Multi-view displays
CA2978717C (en) 2015-03-03 2023-06-20 Misapplied Sciences, Inc. System and method for displaying location dependent content
US10362301B2 (en) 2015-03-05 2019-07-23 Misapplied Sciences, Inc. Designing content for multi-view display
US9715827B2 (en) 2015-04-01 2017-07-25 Misapplied Sciences, Inc. Multi-view traffic signage
US9784439B2 (en) 2015-05-19 2017-10-10 David W. Baker Safety holiday light assembly and method for safe installation from the ground
US9743500B2 (en) 2015-06-11 2017-08-22 Misapplied Sciences, Inc. Multi-view architectural lighting system
US9792712B2 (en) 2015-06-16 2017-10-17 Misapplied Sciences, Inc. Computational pipeline and architecture for multi-view displays

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101563725A (zh) * 2006-12-18 2009-10-21 索尼株式会社 显示控制设备、显示控制方法和程序
CN101295618A (zh) * 2007-04-25 2008-10-29 陈清华 阳极点阵显示技术
CN101782824A (zh) * 2009-01-20 2010-07-21 日东电工株式会社 具有光学坐标输入装置的显示系统
CN102456526A (zh) * 2010-10-18 2012-05-16 佳能株式会社 电子束显示器
CN103369334A (zh) * 2012-03-29 2013-10-23 株式会社东芝 图像显示装置
US9396588B1 (en) * 2015-06-30 2016-07-19 Ariadne's Thread (Usa), Inc. (Dba Immerex) Virtual reality virtual theater system

Also Published As

Publication number Publication date
CN110476148A (zh) 2019-11-19
US20180277032A1 (en) 2018-09-27
WO2018175886A1 (en) 2018-09-27
JP2020515127A (ja) 2020-05-21
US10269279B2 (en) 2019-04-23
CA3055222C (en) 2022-12-13
CA3055222A1 (en) 2018-09-27
JP7033606B2 (ja) 2022-03-10
KR102268377B1 (ko) 2021-06-25
EP3602262A4 (en) 2020-09-09
KR20190117019A (ko) 2019-10-15
EP3602262A1 (en) 2020-02-05

Similar Documents

Publication Publication Date Title
CN110476148B (zh) 用于提供多视图内容的显示系统和方法
US11115633B2 (en) Method and system for projector calibration
EP2824923B1 (en) Apparatus, system and method for projecting images onto predefined portions of objects
US20170186166A1 (en) Stereo depth camera using vcsel with spatially and temporally interleaved patterns
US9049369B2 (en) Apparatus, system and method for projecting images onto predefined portions of objects
CN106062862A (zh) 用于沉浸式和交互式多媒体生成的系统和方法
CN109154499A (zh) 用于增强立体显示的系统和方法
US11156843B2 (en) End-to-end artificial reality calibration testing
CN105723420A (zh) 混合现实聚光灯
CN108475180A (zh) 在多个显示区域之间分布视频
US20170374333A1 (en) Real-time motion capture and projection system
US11132832B2 (en) Augmented reality (AR) mat with light, touch sensing mat with infrared trackable surface
CN104516532A (zh) 使用光学感测阵列确定光源姿态的设备和方法
CN113870213A (zh) 图像显示方法、装置、存储介质以及电子设备
KR102185322B1 (ko) 적외선 스테레오 카메라를 이용한 위치 검출 시스템
CN107743628A (zh) Led面发光的结构化光
US10819952B2 (en) Virtual reality telepresence
Jones Augmenting complex surfaces with projector-camera systems
US20230108922A1 (en) Using camera feed to improve quality of reconstructed images
Sharlin et al. A wireless, inexpensive optical tracker for the CAVE/sup TM
KR20230132001A (ko) 적외선 기반의 스마트형 객체 정보 처리 장치 및 방법
TW202347258A (zh) 深度處理系統及其操作方法
Hieda Digital video projection for interactive entertainment
KR101315433B1 (ko) 모스 부호 기반의 증강현실 시스템
Kraus Wireless Optical Communication: Infrared, Time-Of-Flight, Light Fields, and Beyond

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant