本申请基于2005年7月27日提交的且题目为“SYSTEM,METHODAND APPARATUS FOR CAPTURING AND SCREENING VISUALS FORMULTIDIMENSIONAL DISPLAY”的美国临时申请序列号60/702,910、于2005年8月25日提交的且题目为“SYSTEM,METHOD APPARATUSFOR CAPTURING AND SCREENING VISUALS FORMULTI-DIMENSIONAL DISPLAY (ADDITIONAL DISCLOSURE)”的美国临时申请序列号60/711,345、于2005年8月25日提交的且题目为“AMETHOD,SYSTEM AND APPARATUS FOR INCREASING QUALITY OFFILM CAPTURE”的美国临时申请序列号60/710,868、于2005年8月29日提交的且题目为“A METHOD,SYSTEM AND APPARATUS FORINCREASING QUALITY AND EFFICIENCY OF FILM CAPTURE”的美国临时申请序列号60/712,189、于2005年10月16日提交的且题目为“AMETHOD,SYSTEM AND APPARATUS FOR INCREASING QUALITY OFDIGITAL IMAGE CAPTURE”的美国临时申请序列号60/727,538、于2005年10月31日提交的且题目为“A METHOD,SYSTEM AND APPARATUSFOR INCREASING QUALITY AND EFFICIENCY OF FILM CAPTUREWITHOUT CHANGE OF FILM MAGAZINE POSITION”的美国临时申请序列号60/732,347、于2005年11月22日提交的名称为“DUAL FOCUS”的美国临时申请序列号60/739,142、于2005年11月25日提交的且题目为“SYSTEM AND METHOD FOR VARIABLE KEY FRAME FILM GATEASSEMBLAGE WITHIN HYBRID CAMERA ENHANCING RESOLUTIONWHILE EXPANDING MEDIA EFFICIENCY”的美国临时申请序列号60/739,881、于2005年12月15日提交的且题目为“A METHOD,SYSTEMAND APPARATUS FOR INCREASING QUALITY AND EFFICIENCY OF(DIGTTAL)FILM CAPTUTE”的美国临时申请序列号60/750,912,并要求其优先权,这些申请的全部内容由此通过引用被并入。本申请基于2006年7月6日提交的题目为“SYSTEM AND METHOD FOR CAPTURINGVISUAL DATA AND NON-VISUAL DATA FOR MULTIDIMENSIONALIMAGE DISPLAY”的美国专利申请序列号11/481,526、于2006年6月5日提交的题目为“MULTI-DIMENSIONAL IMAGING SYSTEM ANDMETHOD”的美国专利申请序列号11/447,406,并要求其优先权,这些申请的全部内容由此通过引用被并入。
本申请还通过引用完整地合并:于2006年7月24日提交的题目为“SYSTEM,APPARATUS,AND METHOD FOR INCREASING MEDIASTORAGE CAPACITY”的美国专利申请序列号____,即,要求于2005年7月22日提交的美国临时申请序列号60/701,424的利益的美国非临时申请;以及于2006年6月21日提交的题目为“A METHOD,SYSTEM ANDAPPARATUS FOR EXPOSING IMAGES ON BOTH SIDES OF CELLOIDOR OTHER PHOTO SENSITVE BEARING MATERIAL”的美国专利申请序列号____,即,要求于2005年6月21日提交的美国临时申请号60/692,502的利益的美国非临时申请;这两个申请的全部内容如同在这里被完整地阐述一样。本申请还通过引用完整地合并:于2006年7月6日提交的题目为“SYSTEM AND METHOD FOR CAPTURING VISUALDATA AND NON-VISUAL DATA FOR MULTIDIMENSIONAL IMAGEDISPLAY”的美国专利申请序列号11/481,526、于2006年6月22日提交的题目为“SYSTEM AND METHOD FOR DIGITAL FILM SIMULATION”的美国专利申请序列号11/473,570、于2006年6月21日提交的题目为“SYSTEM AND METHOD FOR INCREASING EFFICIENCY ANDQUALITY FOR EXPOSING IMAGES ON CELLULOID OR OTHERPHOTO SENSITIVE MATERIAL”的美国专利申请序列号11/472,728、于2006年6月5日提交的题目为“MULTIDIMENSIONAL IMAGINGSYSTEM AND METHOD”的美国专利申请序列号11/447,406、以及于2006年4月20日提交的题目为“SYSTEM AND METHOD TO SIMULATEFILM OR OTHER IMAGING MEDIA”的美国专利申请序列号11/408,389,这些申请的全部内容如同在这里被完整地阐述一样。
具体实施方式
本发明涉及成像,并且更具体地,涉及捕获画面和空间数据以为例如多维显示器提供图像处理选择方案。本发明还涉及用于产生光以三维地放映画面图像的系统、设备和方法。提供了一种系统和方法,其除了由摄像机捕获的在这里一般称为“画面”的画面场景以外,还提供了例如由空间数据采样设备捕获的空间数据。由摄像机捕获的画面在这里一般称为“图像”。画面和空间数据被共同提供,以便与画面的三维缩影有关的数据可以在例如生产后的处理期间使用。另外,参考与图像有关的实际的、选择的非图像数据,提供了用于影响“两维”捕获的图像的成像选择;这实现了图像的多维外观,进一步提供了其他的图像处理选择。
在一个方面,提供了一种多维成像系统,其包括摄像机,并且还包括可操作来发送和接收传输以测量空间和深度信息的一个或更多设备。此外,数据管理模块可操作来接收空间数据并在分离的显示器上显示不同的图像。
应该理解,本发明不限于具体的方法、装置或系统,其当然可以变化。还应该理解,这里使用的术语仅仅出于描述特定的实施方案的目的,并不被规定为限制性的。如在本说明书和所附权利要求中使用的,单数形式“a”、“an”和“the”包括复数的参考含义,除非内容另外明确规定。因此,例如提及“一个容器”包括两个或更多容器的组合等等。
这里使用的术语“大约”在指可测量的值例如数量、暂时的持续时间等时意味着包括偏离特定的值的±20%或±10%、更优选地为±5%、甚至更优选地为±1%、并且还要更优选地为±0.1%的变化,因为这样的变化适合于执行所公开的方法。
除非另外限定,这里使用的所有技术和科学术语或者领域术语的含义与本发明涉及的领域中的普通技术人员一般理解的相同。虽然在本发明的实践中可以使用与这里描述的类似或等价的任何方法或材料,但是这里还是描述了几种方法或材料。在描述和要求本发明的权利时,将使用下列术语。如在这里使用的,术语“模块”一般指有助于本发明的效率的一个或更多的分立组件。可选地,模块可以操作或依赖于一个或更多的其它模块,以便运行。
“数据采集模块”指用于接收信息并继续传递该信息用于随后的处理和/或记录/存储的组件(在这种情况下涉及成像)。
“图像记录介质”指大部分图像捕获系统的物理(例如照像感光乳剂)和电子(例如磁带和计算机数据存储驱动器)组件,例如静止或运动的胶片摄像机或胶片或电子捕获静止的摄像机(例如,数字式)。
“空间数据”指与一个物体相对于另一个物体的邻近度的方面有关的信息。在这种情况下,系统的摄像机方面的选定部分和由信号产生设备(其传输选择的信号,并记录该信号被偏转后返回到传输设备的接收和时间测量功能的时间)在一个结构中捕获的图像内的元素(例如物体)通过依赖于空间数据和图像捕获的参考信息协力操作和/或链接到摄像机的运行。
“至少一个画面元素”如同摄像机捕获的画面一样,无论是潜在的图像光化学捕获还是电子捕获,一般都存在至少一个不同的可辨别的方面,假定它只是天空、岩石等。大部分捕获的图像具有很多这样的元素,这样的元素产生与该方面有关的作为总图像捕获的一部分的不同的图像信息和相关的画面信息。
“编码元素”指添加的信息标记例如在一般被扫描以提取其包含的信息的可见编码元素的情况下的条形码,或电子记录的轨迹或文件例如与视频图像捕获有关的同时记录的时间代码数据。
“画面数据元素”指条形码或另外包括一般使物体链接和/或结合在一起的数据的看得见的和/或可扫描的图标、记号和/或印记,其以至少一种类型的外部信息出现在该物体上。运动图片胶片通常包括由胶片制片商设置的和/或作为摄像机的功能的数字参考记号,允许感光乳剂本身来提供相关的非图像数据,然而该数据与在同一条具有感光乳剂的生胶片(emulsion bearing film stock)中捕获的图像有关。目的是连接图像与外部方面,包括但不限于记录的音频、其他图像和附加的图像管理选项。
和条形码不同,“非画面数据元素”指电子记录的数据,在数据的实际记录之后,该电子记录的数据在常规上不改变存储其的介质的可见方面。包括用于将视频和音频数据读取和聚集成看得见和听得见的结果的系统的电子读取设备是一个例子。在这种情况下,数据存储介质例如磁带和数据驱动器是所存储的可能的非画面数据元素的例子,链接所捕获的空间数据或不是图像数据的其他数据与单独存储的或者作为相同数据存储介质的不同方面的相应图像。
“摄像机的至少一个选择的组件”指一个方面:空间数据测量设备不能占据确切的位置作为摄像机图像的捕获点,例如在胶片门或者CCD芯片中曝光的照相感光乳剂的平面。因此,在图像捕获的确切点和/或透镜和/或其他摄像机零件之间存在空间的可选择的偏移,其中之一是空间点,所收集的空间数据将被选择性地调整到该空间点以参照,根据选择的偏移来调整空间数据以推断总空间数据结果的数学提供选择使空间数据收集单元占据与选择的摄像机“零件”或者组件相同的空间。
作为参考空间数据和选择性的其他标准和参数的计算机和特定程序的功能,“至少一个修改的画面图像”指单一的两维图像捕获修改成至少两个分离的最终图像,以从单个图像产生至少两个明显不同的数据文件。单独的数据文件每个都代表原始捕获的图像的修改,并且表示至少在一个修改的图像上。
“最终画面图像”指不同修改版本的单个两维图像捕获,以提供部分地根据在初始图像捕获期间采集的空间数据来修改的图像的选择性分层的显示。对于可能的观看者,最终显示的结果是单个最终画面图像,其实际上包括在选择性地协力显示的至少两个不同的两维图像的一个结构中,作为显示器的功能,以提供选择的效果,例如曾经的两维图像捕获的多维(包括“3D”)印象和表现。
“最终多图像画面”指所捕获的单个两维图像,其根据与在图像内捕获的区中出现的实际元素有关的分离的数据被部分地分解成它的图像缩影。如果空间数据是特别与来自透镜和/或实际点或图像结构(和/或捕获)的深度或距离有关的分离的数据,则作为本发明的组件的特定的计算机程序可以部分地运行以根据相对于空间数据确定的选定阈值来分开原始图像的缩影。因此,部分地由在原始图像捕获中出现的信息得到的至少两个不同的图像一前一后地显示在提供具有多维印象的单个图像印象的离可能的观看者的不同距离处,该图像印象是所显示的最终多图像画面。
“最终画面图像从至少两个距离被投影”指获得本发明的一个可能结果,根据在捕获时收集的空间数据通过两维图像修改,至少将原物分解成“前景”和“背景”数据而产生分离的图像文件(没有限制完整的原始捕获图像的版本可以选择性地作为所显示的一个或更多修改的图像而出现),具有那些版本的原始捕获图像的原始场景的三维再现从分开的距离投影和/或传播,以真实地模拟包括捕获的场景或画面的原始图像缩影的空间差异。
“距离包括沿着观看者视线的不同距离”将深度称为沿着观看者视线的距离:相对于本发明的视线是离可能的观看者眼睛的可测量的距离以及沿着该可测量直线的全部图像的距离。因此,如果卷尺测量从观看者的眼睛延伸通过显示器到达两个显示的两维图像或者更多显示的两维图像,卷尺测量出现在观看者眼睛指向或他的视线的位置处,则在多维显示器中不同深度处相对于面向预期的观看者的侧面的显示器的高度和宽度而显示的图像也出现在不同的可测量的点上。
“至少两个不同的成像平面”在一个方面指:其中本发明显示全部或者部分地由原始的二维图像产生的多个两维图像,其中采集的与图像有关的其他数据(在这种情况下为空间数据)可以向原始图像通知朝着期望的美学上可显示和/或看得见的结果的选择性的修改(在这种情况下为数字修改)。
“由设备显示的至少一个图像的高度和宽度”指当放映设备的侧面尺寸面向并最靠近预期的观看者时图像相对于放映设备的高度和宽度的高度和宽度。
“设备的高度和宽度”指面向并最靠近预期的观看者的放映设备的侧面尺寸。
计算机执行的指令(例如,软件)被提供以选择性地分配场景的前景和背景(或者其他不同的图像相关的优先权)缩影,并将这些缩影分离成不同的图像信息。此外,执行已知的空间数据接收方法,以产生三维地图并产生图像的各种三维缩影。
可以使用多个介质中的第一个例如胶片来捕获图像中的画面,并且多个介质中的第二个可以是例如数字存储设备。非画面的、与空间相关的数据可存储在任一介质中和/或传输到任一介质或来自任一介质,并且在处理期间使用,以通过对照存储在一个介质(例如,胶片)上的图像和存储在其他介质(例如,数字存储设备)上的空间数据来修改图像。
提供计算机软件以选择性地对照空间数据和相应的图像,并且可以在不需要手工用户输入或指令的情况下修改图像,以识别关于画面的各个部分和空间信息。当然,本领域的技术人员应该认识到,没有必要去除所有的例如产生美学调节的用户输入。因此,软件实质上自动地运行。计算机运行的“转换”程序可操作,以为了实质上不限数量的最终可显示的“版本”而修改最初捕获的图像数据,如同用户的美学目标所确定的。
在一个方面,提供了一种连接有深度测量元件的摄像机。摄像机可以是几种类型中的一种,包括运动图片、数字、高清晰度数字影院摄像机、电视摄像机或者胶片摄像机。在一个方面,摄像机是例如在于2006年6月5日提交的且题目为“MULTI-DIMENSIONAL IMAGING SYSTEMAND METHOD”的美国专利申请序列号11/447,406中描述的并要求权利的“混合摄像机”。这样的混合摄像机提供了双对焦(dual focus)捕获,例如用于双对焦放映。根据本发明的一个方面,混合摄像机相应地设置有深度测量元件。深度测量元件可以提供例如声纳、雷达或其他深度测量特征。
因此,混合摄影机可操作来接收出现在捕获的图像数据中的物体的图像和空间相关数据。特征的组合使额外的创造性选择能够在生产后和/或放映处理期间被提供。进一步地,可用各种各样的方式从传统的电影投影和/或电视显示器向观看者提供图像数据。
在一个方面,混合摄像机例如数字高清晰度摄像机装置配置成在摄像机的外壳中合并深度测量传输及接收元件。与深度相关的数据根据由相同的摄像机数字捕获的画面数据被接收和选择性地记录,因而从与捕获的关键图像区有关的摄像机数据选择性地提供深度信息或距离信息。
在一个方面,与深度相关的数据记录在用于存储数字画面数据的相同磁带或者存储介质上。数据(无论是否记录在相同的介质上)是时间代码或另外被同步,用于在与捕获并存储或者捕获并传输、广播等的相应画面有关的数据之间的适当参考。如上所述,与深度相关的数据可以存储在不同于存储有画面数据的特定介质的介质上。当孤立地在视觉上呈现时,空间数据提供构造的图像区域的一种“立体地图”。如这里所使用的,构造的图像区域一般称为图像“活动区域”。此立体地图可以接着被应用在选择性地分立和特定的水平上修改图像数据,如打算供最后的显示而使用,例如为了三维图像效果。
此外,在捕获并存储画面数据时,同时收集并记录与深度相关的数据。可选地,深度数据可以在一段短的时间内被捕获到数字图像数据的每个帧,和/或视频数据被捕获。进一步地,如在通过引用全部合并在这里的上面确认的Mowry的临时和非临时未决的专利申请中公开的,其涉及数字或胶片图像的关键帧生成,以提供影响例如分辨率的增强的每幅图像数据内容,深度数据不必相对于捕获的每个图像收集。对现有图像(例如,对变形)的图像推断特征可以允许每秒少于24帧,以例如在图像捕获期间被空间采样和存储。数字推断特征还可以允许定期的空间捕获,以相对于捕获的透镜图像而影响在与图像中的物体有关的空间数据样本之间捕获的很多图像中的图像区。为系统保存可接受的空间数据样本,以获得可接受的美学结果和效果,同时图像“区”或缩影在每个空间数据样本之间转换。自然地,在静止的摄像机或者本发明的单帧应用中,单个空间集合或“地图”根据所捕获的每个单独的静止图像而被聚集和存储。
进一步地,如在通过引用全部合并在这里的上面确认的Mowry的临时和非临时未决的专利申请中公开的,以及另外如本领域中公知的,其他装置和选择方案可以选择性地与这里所述的空间数据采集成像系统耦合。例如,捕获不同聚焦(或另外由于光学或其他图像变化影响而不同)版本的透镜采集的图像,其可以包括这里公开的空间数据的收集。这可以例如允许被捕获为两个不同的图像的透镜画面的不同版本的更多分离的应用和使用。例如上面描述的关键帧方法增加了图像分辨率(通过允许关键帧在图像数据内容中分辨率非常高,以用该数据注入随后的图像),且还可与这里的空间数据采集装置耦合,从而产生了唯一的关键帧生成混合器件。以该方法,关键帧(其还可以是被选择性地捕获以增加材料的总成像分辨率的关键帧,同时延长传统介质的记录时间,如根据Mowry,通过引用全部合并在这里)还可以使与其有关的空间数据被保存。因此,关键帧可能不仅用于画面数据,而且关键帧用于与允许关键帧提供图像数据的图像有关的其他方面的数据的其它方面和与其他图像细节有关的信息;这样的一个例子是图像缩影分配数据(关于这样的缩影相对于观看者的位置的显示)。
如通过引用全部合并在这里的上面确认的Mowry的临时和非临时未决的专利申请中所公开的,以额外的选择方案增强并改善生产后和/或放映处理,作为这样的数据的结果,该数据是对由摄像机捕获的画面的补充。例如,可提供用来显示由单个透镜捕获的不同聚焦的图像的双屏幕。根据这里的一个方面,与深度相关的数据根据用户期望的参数选择性地应用于图像区。数据以选择性的特征和/或优先权被应用,并且可以包括使用数据的计算处理,该数据在确定和/或决定哪个图像数据被传递到相应的屏幕方面是有用的。例如,前景和背景数据可以选择成产生具有特殊效果或趣味的观看体验。根据这里的教导,可提供三维画面效果作为与空间差异一起出现的图像数据的效果,从而模拟在图像捕获期间出现的前景和背景图像数据的逼真的空间差异,虽然在捕获期间在显示屏和实际前景和背景元素之间不必有相同的距离。
分离的屏幕显示的用户标准可自然地选择成允许投影或单独“拍摄”或图像被调整(例如在尺寸上)以获得期望的最终图像效果。选择在离观看者变化的距离处的多个显示器或显示装置允许完全分离和严格的多维显示的可能性。可能地,例如,与单个“像素”相比一样小或者甚至更小的图像缩影可在修改的显示中相对于观看者的位置具有其自己的唯一距离,正如单个实际画面可以包括相对于观看者或活动的场景或捕获其的摄像机对一直到正被观看的事物的每个缩影的唯一的距离。
由设置在摄像机中或设置有摄像机的深度测量装置收集的与深度相关的数据使全部图像数据和其中选定的区域的特别处理成为可能。例如,物体的三维画面实体的复制例如通过在上述临时和非临时专利申请中公开的偏移屏幕方法,或者可选地通过其他公知的技术被实现为与捕获的图像数据有关。与在视觉上捕获的对象有关的额外数据的存在因此不管为电影、电视还是静止的摄影都提供了过多的生产后和特别的处理选择,否则在传统的摄影或数字捕获中将失去这些生产后和特别的处理选择。进一步地,从单个图像产生并根据空间数据转换的不同图像文件可以选择性地将最初捕获的图像的所有缩影保存在所产生的每个新图像文件中。根据空间数据强制特定的修改,以获得期望的放映效果,从而产生不同的最终图像文件,所述不同的最终图像文件不必“减少”图像缩影以变得互相不同。
在本发明的再一结构中,第二(附加的)空间/深度测量设备可以与摄像机一起操作,而不必在物理上是摄像机的一部分或者甚至位于摄像机的物理紧邻区域内。考虑到在摄像机透镜视野之外的、为了其他效果目的和数字工作的物体部分的数据,多个发射/接收装置(或者其他深度/空间和/或3D测量设备)可以选择性地例如相对于摄像机定位,以便提供在摄像机透镜视野中的物体的额外的位置、形状和距离数据(以及其他有关的定位和形状数据),以增强生产后的选择。
在一个方面,多个空间测量装置选择性地相对于摄像机透镜定位,以提供与摄像机正在拍摄的事物有关的环境和物体的清楚的和选择性地详细的三维数据地图。数据地图用于修改由摄像机捕获的图像,并且选择性地产生接近于实际的人类体验的独特的放映体验和视觉效果,或者超过在二维影院中提供的至少分层的多维印象。进一步地,与图像有关的空间数据可以考虑已知的成像选择,已知的成像选择在将被“模仿”或临时提供的图像中仅仅是三维性质,而甚至没有“一些”空间数据或者超出提供与图像的增加的维数有关的信息的图像数据的其他数据。多于一个的图像捕获摄像机可进一步用于收集这样的多位置图像和空间数据采集系统的信息。
仅仅出于例征性的目的,而不是用来以任何方式限制本发明的范围,提供了用于实现本发明的具体方面的实例。
现在参考附图,其中相似的参考数字表示相似的元件,图1示出了摄像机102,其可被格式化为例如胶片摄像机或者高清晰度数字摄像机,并且与单个或者多个空间数据采样设备104A和104B耦合,用于捕获两个物体-树和桌子的示例性画面的图像和空间数据。在图1所示的实施例中,空间数据采样设备104A耦合到摄像机102,而空间数据采样设备104B没有。前景空间采样数据106和背景空间采样数据110尤其在最终的显示中实现了桌子与树的可能的分离,从而提供了在离观看者不同的深度/距离处沿着观看者的视线的关于放映的缩影的每个元素。进一步地,背景采样数据110提供了图像数据处理基础或者图像的选择性地分离的缩影的实际“立体地图”记录,其一般与在所捕获的图像中的可辨别的物体(例如,图1中所示的桌子和树)有关。图像高清晰度记录介质108可以是例如胶片或电子介质,胶片或电子介质选择性地与由空间数据采样设备104提供的空间数据同步和/或与空间数据一前一后地被记录。
涉及由摄像机、数字或胶片捕获并记录画面和距离信息的公开进一步在这里被扩展。进一步地,在这里公开了包括半透明的第一屏幕的双屏显示器(两个暂时都在一个结构中,并且在其他公开中为物理地半透明的)的本发明的方法,以在特别是在当前技术中可管理的结构上演示。
本发明提供了一种选择性捕获和记录深度数据的数字摄像机(通过选择性地从摄像机的有利点或者相对于摄像机的其他位置传输和该传输的接收的分析,包括在采集数据中使用对深度的多于一个的有利点的情况),并且在一个方面,摄像机是数字的。
在这里,胶片摄像机(和/或数字捕获系统或者混合胶片和数字系统)与深度数据采集装置耦合,以允许从选择的有利点例如摄像机透镜位置或者选择性地靠近该位置来选择性地记录,该深度信息(或者数据)可以属于在采集中选择性分离的图像区,或者可以是被选择性地分配给选择性分离的显示系统的每个像素或者选择性地小的图像区的、以初始收集形式的选择性的宽度和深度,例如,与高清晰度数字图像捕获和记录装置的每个像素有关的深度数据数字(例如,SONY CINE ALTA和相关的摄像机)。
选择性地,这样的深度数据可以通过“双系统”记录来记录,对照装置在拍摄的图像和深度数据之间被提供(例如,具有利用胶片的双系统声音记录),或者实际的胶片底片可以支持磁性或者其他记录装置(例如,磁性“声音条”或者磁性装置例如KODAK已经用于在胶片上记录DATAKODE),尤其是用于记录关于图像区和/或缩影的深度数据。
提到与深度采样和记录装置耦合的、对应于通过图像捕获装置捕获的图像的数字、胶片或者其他图像捕获装置可以包括静止的数字的或者胶片或者其他静止的画面捕获摄像机或者记录装置是重要的。本发明直接涉及对“摄影”的静止捕获,如同对胶片和/或电视和/或其他运动图像显示系统的运动捕获一样。
在放映阶段,数字和/或胶片投影可以被选择性地使用。考虑到将被“分配”到投影装置的图像区(或对象和/或缩影)或者使区变得与捕获画面中的其他这样的区、对象和/或缩影不同,涉及来自如这里公开的数字捕获或者胶片捕获的图像数据的生产后装置可能受到深度数据的影响。
一个例子是主屏幕,其比在这里被称为背景屏幕的另一屏幕更接近于观众,前者被称为前景屏幕。
前景屏幕可以是一种物理上(或者电子地)透明的类型,以(部分地)允许图像显示在该前景屏幕上,同时也允许间断地观看背景屏幕。
在一个可能的结构中,屏幕可以在是两个滚轴上的外壳(sheath),选择性地具有正常影院显示屏尺寸,该结构决不将这里的权利要求限制为所有的物理、电子和化学的可能结构(或其他半透明屏幕创建装置)。
在这里,该“外壳”是屏幕,具有能够反射的选择性地大的部分和/或带,而其他部分和/或带不是反射的。目的是在一部分时间内显示前方投影的图像,以及在一部分时间内允许观众“看穿”前景屏幕到背景屏幕,这使选择性的图像显示装置例如后方投影或者其他常见的图像显示选择不限于投影(或者任何一种类型)。
图像显示装置可以选择性地被电子连接,以允许在前景屏幕上显示的图像为稳定和清楚的,如同一般的间断或者数字投影体验(胶片或者数字)一样。
所述“外壳”选择性地具有垂直或水平或以别的方式“移动”的手段;存在产生部分实心和部分透明的(选择性地反射的)投影表面的目的,选择性地允许位于两者前方的观众完全连续地观看在前景和背景屏幕上的两个图像的体验。
这里所述的两个屏幕是示例性的。明显地,允许考虑和/或显示更多维缩影的非常多的屏幕的本公开和发明的一个方面可以包括在本发明的结构中。进一步地,例如在实心材料或者液态或者其他图像显示表面装置中的复杂的放映装置可以允许实质上不限维数的显示,提供不仅仅被垂直和水平分配而且在深度上分配(在一般的两维显示装置中)的图像数据,允许第三维度在其显示结果中是选择性地离散的。
例如,具有100个深度选择的屏幕例如其中立方体的区显示(“屏幕”)的激光或其他外部激励系统允许图像数据在捕获的画面中表示的实际物体的空间差异的分离的模拟中被分配(而不管捕获是胶片还是数字)。例如“磁共振”成像,这样的显示系统可以具有外部磁性或者其他电子影响装置来将变化或“指令”强加到这样的复杂多维放映装置(的方面),(或者“立方”屏幕,虽然屏幕的形状当然不需要是类似正方形或者立方形的)使得图像显示在深度上在影响被捕获时(数字地或者在胶片或者其他图像数据记录装置上)的物体的图像的空间关系(或深度)的模拟中被分配。
显示图像的激光影响装置还可以是影响内部结果因而影响由多维放映装置(和/或材料)呈现的图像的外部装置的例子,多维放映装置(和/或材料)的组件和/或方面可以根据激光(或者其他的外部或内部强加的装置)将选择的颜色或图像缩影显示在多维放映区内的选定点上。一系列显示器也可以配置成这样的多维屏幕,当选择的屏幕是用于根据深度或离观看的观众的“距离”或者其他选择的参考点来显示图像缩影(和/或像素或者等效物)的目标(或者选择)时,该多维屏幕允许通过其他屏幕的部分来观看。
本发明在这里提供了深度数据的捕获,该深度数据足够分离以选择性地利用足够的“深度”和画面数据来处理(和“提供”)这样的未来显示技术,以提供部分地在这里公开的可能是影院体验的多维显示结果。
在这里技术的可能的所有权性质明显允许选择捕获和放映装置以选择性地排除其他这样的捕获和放映装置,其中使用本发明的多维捕获和显示方面。例如,“胶片”可被认为是一个与该系统有关的图像捕获装置,但是不是唯一的捕获装置。
考虑到用于捕获的选择性类似的(或者一样的)场景的一个或更多透镜图像的两个或更多“聚焦”优先权,本发明还应用于如这里所述的捕获的图像,例如“双对焦”画面。不同聚焦的场景的这样记录的捕获(静止或运动)在这里可以选择性地显示在多维效果的不同的屏幕上。例如接收与相同场景和/或透镜图像的前景和背景聚焦版本有关的图像数据的前景和背景屏幕。
很清楚,本发明的很多结构的主要优点是图像数据可以选择性地(和有目的地和/或自动地)被分配到在离观众的可选择的距离处的(而不是仅仅在离观众的单一距离处的屏幕上)的图像显示装置(例如屏幕)。利用可选择数量的这样的深度图像显示选择/装置,这样的选择可以通过两个“偏移的”眼睛产生较接近于“实际生活”观看的强大的观看体验,其体现了距离和深度(与单个透镜观看装置不同)。
摄影、电影和电视(以及其他显示系统)的创造性选择现在包括创造性地影响图像区和捕获的“对象”的能力,与它们如何被捕获或者为创造性效果而选择性地改变而同步。
参考附图,其中相似的参考数字指相似的元件。图1从侧视图示出了观看者102和本发明的显示器110。该结构表明了占据三维的放映“区域”,在该结构中其包括显示器本身。在这里,没有限制其他选择和内部产生的显示可能,外部强加产生的影响对显示方面本身产生影响,影响选定的品质和亮度(以及自然地,颜色组件组成)的“颜色”的外观,其可能选择性地出现在具有三维“显示区”的任何点处。
像素104出现在相对于观看者最前景的显示平面上。该平面本质上与影院(以及大多数显示系统,包括计算机、电视等)的两维平面同义。在这里,像素106和108表明显示器的可透射光的性质,允许这些像素在不仅仅相对于高度和宽度(相对于像素104)而且还相对于深度的不同点处。就深度来说,参考是对在图1的侧视图中从左到右的显示器的尺寸,深度还指沿着观看者视线的最近和最远的可能显示的缩影之间的距离。放映区中可能的像素位置和/或成像平面的数量可根据结构和期望的画面目标选择。
在重要的结构中,放映区(例如)是清楚(或半透明)的“立方体”,其中立方体内部(物质和/或组件)的组合允许出现在立方体内任何点处的可见光、可选择的颜色和亮度(以及一般对监控器和数字投影的其他相关的传统显示选项)的光的产生。很可能,当由透镜捕获为两维图像的单个“画面”通过立方体(或者其它三维)显示区相对于高度和宽度被“分配”时,在预期的结构中将只有一个以单个高度和宽度出现的所产生的图像缩影(例如像素,虽然产生或传递缩影的显示器光不限于作为产生看得见的图像部分的装置的像素),如同二维图像一样。但是,多于一个的图像缩影可以根据(例如)捕获的图像中的实际捕获对象的距离而出现在相同深度(或者相对于观看者视线的相同放映距离)处,当被摄像机捕获时,对象确实可能出现在离摄像机的相同距离处。
图2根据上面内容示出了影院例子。再次看到相对于三维显示器和/或显示区104的观看者102,在这里,外部成像的例子202影响激励显示区中的方面、特性和/或组件(并且作为先后起作用以在显示区中产生图像数据的显示器和外部设备的功能)。该实例示出了由光传输设备的阵列传送的颜色分量(例如激光是可能的方法和/或影响的效果),在这里,三个这样的设备在立方体内非常小的区中展示可见光的产生(例如,如果实际上不是像素,则与像素同步的区域),其中,三个激光器或者提供光的设备允许影响的集中(例如,分离的颜色分量选择性地交叉)。
在一个结构中,显示器本身或显示器零件的材料性质将起作用和/或为外部提供的光提供显示装置。图2展示了被产生的光的单个点。自然地,很多这样的点(理想地提供整个捕获的画面的复制)由这样的阵列提供,包括这样的外部提供的图像形成影响的必要的速度和覆盖范围(再次,显示器或者示例性“立方体”显示区的功能和/或其它特性与组件协力)。
磁共振成像是非典型的成像装置的例子,(磁性)允许三维对象的交叉部分的观看,该对象的其他部分从此“薄片”的特定显示器除去。在这里,意指外部(例如MRI的磁体)电子影响产生的成像效果的这样的方法的倒置结构在这里将类似地(在外部影响的显示结果中)影响选择的区域,例如除其他显示区的区域之外的交叉部分,虽然以快速改变的形式来允许(离观看者)可能的选定数量的总放映距离或者本质上可提供多少片“倒置的MRI ”。
进一步地,如同一般的监控器一样,产生像素或者同义的明显不同的颜色区的显示器和装置的选择性的透明度可以在内部被完整地提供,作为显示器的功能。显示器的变化、移位或者其它可变的方面将给观看者提供相对于其他点在一些点上“更深”(或者沿其视线更远)地看到显示器内的能力。本质上,部分地提供可能与传统像素一样小(或更小),或者与在美学上适于期望的显示效果的一样大的较深的透明度。
现在参考图3A和3B,示出了多屏幕显示器地点,包括观看前景捕获版本301的观看者307,前景捕获版本301可以由系统用户选择性地修改。前景捕获版本301例如通过数据管理员和同步装置由数据存储提供。进一步地,成像单元300在选择性地可透射光的前景图像显示器上放映和/或提供前景捕获版本301,该显示器可以被提供为显示屏幕,包括例如在图3B中所示的机械屏幕结构中的反射部分303和透明/可透射光的部分302。
在图3所示的机械屏幕结构中,可移动屏幕的长度经由滚轴电动机304传送。屏幕选择性地足够快地移动以允许屏幕呈现为实心的,可透射光的方面从部分302以足够快的步速消失,允许在由显示器带303显示或者在显示器带303上显示时,“通过”清晰可见的前景图像信息连续观看,显示器带303在适当时可为直接观看设备方面或图像反射的方面。
前景显示可以具有非机械的性质,包括具有半透明特性的设备的选择,或者装配成提供可变的半透明特性。进一步地,前景显示可以是更改的直接观看设备,其以与前景聚焦的图像数据有关的图像信息为特征,同时,为位于其后的选择性地连续的背景显示维持透明度、半透明度或者可透射光性。
背景显示屏幕306以来自由成像装置305提供的背景捕获版本308的选择性地修改的图像数据为特征,成像装置305可以是后投影设备、直接观看监控器或者其他的直接观看设备,包括选择性地为相同单元的前投影设备,该相同单元为观看300提供前景图像数据。背景捕获版本图像308可以选择性地连续或者间断地产生,只要通过可透射光的性质或者间断透射的机械结构看得见的图像设置有充分的连贯性以对观看者维持连续的、不间断的背景画面(即,通过人的“视觉持续性”)。以这种方式,观看者有利点307体验到了多个焦点的分层式多维效果,这些焦点差不多出现在离他们的不同距离处。因此,当人眼在一种情况下自然地被限于仅仅选择一个“焦点”时,多个聚焦的缩影或相同场景的多个层的不变的外观导致在现有技术中找不到的新的戏剧性美学体验。
虽然这里所述的很多实例指剧场显示器,但是本发明并不被如此限制。家庭显示器、计算机显示器、计算机游戏和其他典型的消费者和专业显示器地点可以合并如这里所教导的物理分离的分层显示器,以实现由相同透镜捕获的场景的多个版本的有效性产生的类似效果。此外,尽管产生了主要是前景聚焦的画面,例如现有技术中传统的两维产品,甚至每秒一个背景聚焦的“关键帧”的捕获也是有价值的。这样的数据目前没有用于电影发布、TV或者其他可利用的地点。但是,目前没有出现利用用于观看的数据的聚焦的关键帧和其他数据管理选择的各种方法,例如这里所述的方法。
因此,当甚至用来增强图像的生产后处理完全不能推断在焦点揭示画面细节时捕获的很多画面信息时,即使在临时的“关键帧”中,聚焦的第二个捕获版本的数据也将允许产品“保留”并具有否则被全部丢失的有效的画面信息。
因此,今天在这里提供的特征涉及捕获有价值的数据的方法,并且当将来发展用于显示关键帧数据的新的创新时,明天(与现有技术的彩色电影一样)的用户将拥有对兼容和更有趣的投影必要的信息,用于观看能够利用附加的画面数据的未来的系统和技术发展。
现在参考下列示例性实施方案和相关的讨论,进一步描述本发明。
多焦距结构的摄像机、从而拍摄的图像的产品方面以及系统的放映或生产后方面例如多屏幕显示地点被包括。
最初,画面经由单个捕获透镜进入摄像机。选择的透镜图像转向器例如棱镜或者反射镜设备将透镜图像分割成相同聚集的画面(即,光)的两个选择性相等(或不等)的部分。其后,分离的数字化(摄像机)单元并排出现,每个都接收选定的一个分离的透镜图像。
在光传递到这些摄像机单元的相应的数字转换器例如CCD、相关的芯片或者其他已知的数字转换器之前,附加的透镜化机制为每个相应的透镜图像部分提供单独的聚焦环(示为聚焦的光学方面;见2006年5月5日提交的美国序列号11/447,406,其公开内容在这里通过引用被全部并入)。聚焦环对于两个或更多图像版本中的每个是唯一的,并允许一个单元将选择性地聚焦在前景元素上的透镜图像的版本和选择性地聚焦在背景元素上的其他版本数字化。
每个摄像机可操作来记录相同透镜图像的数字化图像,服从于依据第二强加的透镜化(或其他聚焦装置)方面的不同聚焦优先权。记录可以在磁带、DVD或者其他已知的数字化或者视频记录选择上。这里的说明意指被限制为对TV或者摄像机的数字化视频,并且替代地包括电影的所有方面和静止的摄影收集装置。因此,“记录介质”不是待解决的,而更确切地是透镜图像的收集和处理。
照明和摄像机设置提供了增强各种物镜的范围,包括影响景深和其他摄影方面的常见装置。
图4示出了摄像机402,其可被格式化为例如胶片摄像机或者高清晰度数字摄像机,并且与单个或者多个空间数据采样设备404A和404B耦合,用于捕获两个物体-树和桌子的示例性画面的图像和空间数据。在图4所示的实例中,空间数据采样设备404A耦合到摄像机402,而空间数据采样设备404B没有。前景空间采样数据406和背景空间采样数据410尤其在最终的显示中实现了桌子与树的可能的分离,从而提供了在离观看者不同的深度/距离处沿着观看者的视线的关于放映的缩影的每个元素。进一步地,背景采样数据410提供了图像数据处理基础或者选择性地分离的图像缩影的实际“立体地图”记录,其一般与在所捕获的图像中的可辨别的物体(例如,图4中所示的桌子和树)有关。图像高清晰度记录介质408可以是例如胶片或电子介质,胶片或电子介质选择性地与由空间数据采样设备404提供的空间数据同步和/或与空间数据先后被记录。参见例如于2006年7月6日提交的且题目为“SYSTEM AND METHOD FORCAPTURING VISUAL DATA AND NON- VISUAL DATA FROMULTIDIMENSIONAL IMAGE DISPLAY”的美国专利申请序列号11/481,526,其内容在这里通过引用被全部并入。
在黑白运动图片的色化处理(colorization)期间,颜色信息一般被添加到“关键帧”,并且未着色的胶片的一些帧通常具有为推测的结果的颜色,以及通常不以任何方式与最初捕获在黑白胶片上时的物体的实际颜色有关。“三色带彩色印片(technicolor 3strip)”颜色分离工艺捕获并存储(在黑白拍摄的不同胶片中)颜色“信息记录”,以用于重建原始场景的可显示的版本、展示颜色“增加”,如在最初拍摄期间由实际颜色呈现的显示所告知的。
类似地,根据这里的教导,在最初的图像捕获期间捕获的空间信息可潜在地告知(同三色带彩色印片工艺一样)通过摄像机透镜捕获的原始画面的实质上无限数量的“版本”。例如,因为“多么红(how much red)”在来自三色带彩色印片印刷的制造印刷中是可变的,不排除修饰实际上是红色的而不是蓝色的,本发明在从画面和其对应的空间“立体地图”记录中获得期望的效果(例如,三维画面效果)时考虑这样范围的美学选择和应用。因此,例如,可以聚集具有选择性的细节的空间数据,意指“每个图像聚集多少空间数据”是由“明天”的预定显示设备或预期显示设备的组件最佳地告知的变量。根据具有声音、具有颜色等的原始胶片的历史效果,甚至在它对捕获并放映这样的材料具有成本效益之前,对未来使用、应用和系统兼容性的这样的方案的价值是公知的。在成像发展的今天,即使多年以来没有应用于捕获的图像的显示版本,这里所述的采集空间信息的价值也可能是巨大的,并且因此对现在图像放映的商业推荐者非常恰当,包括运动图片、静止摄影、视频博弈(gaming)、电视和涉及成像的其他放映。
对于本领域的技术人员而言,本发明提供的其他用途和产品是显而易见的。例如,在一个方面,数量不受限制的图像显示区在沿着观看者的视线的不同深度处呈现。例如,10英寸深的清晰的立方体显示器根据每个像素距摄像机的空间和深度位置来在不同深度处提供图像的每个“像素”。在另一方面,三维电视屏幕设置有“最后”的背景区域,在该电视屏幕内像素例如从左到右而且选择性地从近到远(例如,从前到后)地被水平提供,比起在一些其它深度处,更多的数据可能出现在“最后”的背景区域。在最后的背景的前面,前景数据占据了“稀疏的”深度区域,也许只有少量的像素出现在特定的深度点。因此,图像文件可按选择性地变化的形式保存图像缩影,例如,在一个文件中,背景以非常柔和的焦点提供(例如,被强加)。
尽管为了理解的清楚,通过说明和举例以一些细节描述了前述的发明,但是,对本领域技术人员而言,显而易见的,根据本发明的教导,可对其进行某些变化和修改而不偏离所附权利要求的主旨和范围。