CN1247994A - 立体全景观看系统 - Google Patents

立体全景观看系统 Download PDF

Info

Publication number
CN1247994A
CN1247994A CN99118076A CN99118076A CN1247994A CN 1247994 A CN1247994 A CN 1247994A CN 99118076 A CN99118076 A CN 99118076A CN 99118076 A CN99118076 A CN 99118076A CN 1247994 A CN1247994 A CN 1247994A
Authority
CN
China
Prior art keywords
visual field
camera lens
processing apparatus
image
image processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN99118076A
Other languages
English (en)
Inventor
维什夫吉特·辛格·纳尔瓦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nokia of America Corp
Original Assignee
Lucent Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lucent Technologies Inc filed Critical Lucent Technologies Inc
Publication of CN1247994A publication Critical patent/CN1247994A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/04Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with cameras or projectors providing touching or overlapping fields of view
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/02Bodies
    • G03B17/17Bodies with reflectors arranged in beam forming the photographic image, e.g. for reducing dimensions of camera
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2624Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Abstract

通过使用多个虚拟光心提供一种立体全景观看器。多面体反射元件例如棱锥体改变第一组镜头中每个镜头的视野,从而在棱锥体内的第一位置形成一组基本上同位置的虚拟光心。棱锥体还改变第二组镜头中每个镜头的视野,从而在棱锥体内的第二位置形成一组基本上同位置的虚拟光心。当一个全景图像被提供给用户的左眼,另一个全景图像提供给用户的右眼时,来自第一和第二虚拟光心的全景图像提供立体全景图像。

Description

立体全景观看系统
本发明涉及一种观看系统,尤其涉及全景观看系统。
为了更有效地工作,希望使用电视会议完成某些任务。电视会议指的是从在远方的装置向用户提供视觉的或其它类型的感知信息,使用户感到和在远方一样。例如,许多公司现在使用电视会议举行会议。电视会议对于远距离学习和远方观看事件例如音乐会和运动会也是有用的。通过向用户提供在图像之间转换的能力,并借以例如模拟观看会议室,向用户提供更实际的电视会议。
在过去,当使用户能够得到几个图像时,使用几个具有不同的光学中心的镜头。图1说明了这种情况。图1说明分别具有光学中心10,12,14和16的镜头2,4,6和8。当用户决定改变图像时,便在镜头之间进行简单地转换。在较复杂的系统中,当用户决定改变图像时,可以得到来自光学中心10,12,14和16得到图像以及来自光学中心18,20,22,24或26的图像。和光学中心例如18,20,22,24或26有关的图像通过使用来自两个最接近所选择的镜头的图像获得。例如,来自光学中心18的图像通过使用来自镜头2和4的图像并在两个图像之间进行内插来模拟来自光学中心18的图像而获得。这种处理在图像中引入了不规则性。此外,形成这些内插的图像需要大量的计算能力和时间,因而使得这种技术成本高,并且对用户的指令响应慢。额外的计算量也限制了可以同时使用系统的用户的数量。
本发明的一个实施例提供一种全方向的或全景的观看器,其中多个不同的镜头通过使其中的至少一个具有由一个平面镜改变的视野使它们实际上具有一个公共的光学中心。每个镜头的视野被这样设置,使得当作为一个整体时形成连续360度的观看区域。通过简单地使用一个镜头、一个以上的镜头或者几个镜头的组合的输出,而不需要在现有技术中使用的大量的内插计算,用户可以扫描360度的视野,其中每个图像具有相同的或接近相同的光心。这种装置通过使观众能够以更真实的方式看到会议室,可用来增强虚拟会议室的使用。这种方式相当于坐在实际的会议室中的人在特定时间通过简单地转头来改变视野的情况一样。
在本发明的另一个实施例中,镜头的位置被如此设置,使得每个镜头对着实心的或空心的多面体例如实心的或空心的棱锥体的不同的反射表面。这使得每个镜头具有位于棱锥体内的虚拟光心。镜头的位置被如此设置,使得其虚拟光心相互偏移。该偏移产生窄的盲区,从而消除从棱锥体的反射表面的边缘接收到的图像失真。
在本发明的另一个实施例中,通过使用多个虚拟光心提供立体的全景图像。反射多面体元件,例如棱锥体,改变第一组镜头中每个镜头的视野,从而在棱锥体内的第一位置形成一组基本上同位置的虚拟光心。棱锥体还改变变第二组镜头中每个镜头的视野,从而在棱锥体内的第二位置形成一组基本上同位置的虚拟光心。当一个全景图像被提供给用户的左眼,而另一个全景图像被提供给用户的右眼时,来自第一和第二虚拟光心的全景图像提供立体的全景视野。
在本发明的另一个实施例中,具有反射表面的多面体例如棱锥体被底对底地叠置或者一个被嵌套在另一个内,从而形成小型的全景观看器。用这种方式,使用多个反射多面体,允许使用许多具有相同的或几乎相同的虚拟光心的镜头。使用许多镜头把大的观看区域划分为许多较小的区域,其中每个镜头观看一个较小的区域。因为每个镜头观看一个较小的区域,便对用户提供增加的清晰度。
在本发明的另一个实施例中,反射多面体例如棱锥体由通过棱锥体的顶点的支柱支撑着。然后把镜头固定在支柱上,以便利用一种固定结构和用于支撑各个镜头的结构提供全景观看器。
在本发明的另一个实施例中,通过把镜头置于观看器的公共的虚拟光心对用户提供近于球形的视野。为了增加球形视野,在公共虚拟光心的镜头可以使用广角镜。
在本发明的另一个实施例中,观看装置可以包括任何类型的图像处理装置。如果图像处理装置是镜头或其它类型的图像捕捉装置,则用户会观看到全景图像,如果图像处理装置是投影器或其它图像产生装置,则为用户产生全景图像。
图1说明现有技术的多镜头观看系统;
图2说明使用具有反射表面的四边棱锥体的四镜头全方位或全景观看系统;
图3说明如何使用棱锥体的反射表面使每个镜头具有共同的光学中心;
图4说明棱锥体的顶视图,用于说明镜头的位置;
图5具有反射侧面的8边棱锥体;
图6是图5的棱锥体的顶视图;
图7是用于控制由镜头产生的数据的系统的方块图;
图8说明在从镜头接收的数据和提供给用户的图像之间的关系;
图9说明对于图7的存储器的寻址方法;
图10是图7的控制器的方块图;
图11说明具有第五个镜头的图2的观看系统;
图12说明具有位移的虚光心的图2的棱锥体的顶视图;
图13说明具有位于盲区域中的阴影的图12的棱锥体;
图14说明使用底对底地叠放的棱锥体的全景观看器;
图15说明使用嵌套的棱锥体的全景观看器;
图16说明使用嵌套的棱锥体的球形观看器;
图17说明用于支撑全景观看器的支架;
图18说明两种类型的失真;
图19说明校正过程;
图20说明在从镜头接收的数据和提供给用户的具有失真的图像之间的关系;
图21说明失真的图像数据是如何被存储的;
图22说明变换的图像数据是如何被存储的;
图23是使用图像变换的全景镜头系统的方块图;
图24说明具有两个虚拟光心的棱锥体;
图25是图24的棱锥体的底视图;
图26是沿图24的线AA取的棱锥体的截面图;
图27是沿图24的线BB取的棱锥体的截面图;
图28说明和棱锥体的一个虚拟光心相关的镜头;
图29说明具有3个虚拟光心的反射棱锥体;
图30说明对于不同的观看方向使用不同对的虚拟光心;
图31说明具有8个虚拟光心的反射棱锥体;
图32说明对于不同的观看方向使用不同对的虚拟光心;以及
图33说明具有3个虚拟光心的全景观看系统的方块图。
图2说明用于向用户提供360度视野的4镜头系统,其中每个镜头具有在棱锥体内的共同的或接近共同的虚光心。棱锥体40具有反射侧42,44,和46,并且可以是空心的实心的或者截头的结构。在优选实施例中,每个反射侧和平行于底面50并通过棱锥体40的顶点的平面形成45度角。镜头52,54,56和58分别和棱锥体反射表面48,42,44和46相连系。这些镜头可以是图像聚集装置,例如光学扫描器。结果,镜头52观看来自表面48的反射,使得能够看到沿箭头60的方向的物体。镜头54观看来自表面52的反射,观看沿箭头62的方向的物体。镜头56观看来自表面44的反射,观看沿箭头64的方向的物体,以及镜头58观看来自表面46的反射,观看沿箭头66的方向的物体。每个镜头具有90度的视野;不过,可以使用较大的视野,并通过删除或组合和重叠的图像有关的象素除去图像的重叠部分。观看来自棱锥体40上的各自相关的反射表面的反射的4个镜头的组合产生围绕棱锥体40的360度的观看区域。当反射镜相对于棱锥体底面45度时,需要使每个镜头的光心位于平行于底面50并和棱锥体40的顶点70相交的平面内。每个镜头的光心也应当位于通过顶点70并垂直于镜头有关的反射表面的基线上。例如,镜头54的光心位于线72上。线72垂直于反射表面42的基线74。线72在通过顶点70并平行于基底50的平面内。同样,镜头56的光心位于垂直于基线78的直线76上,镜头58的光心位于垂直于基线82的基线80上,镜头52的光心位于垂直于基线86的直线84上。
每个镜头光心位于一个上述的直线上,离开顶点一个距离X,并且每个镜头具有其光轴或垂直于底面50的观看方向。(距离X应当这样设置,使得反射表面反射镜头的视野所需的量,不过,当镜头移动而靠近反射表面时,反射表面的缺陷将成为更明显的。)光心的这种定位产生共用一个虚拟光心的镜头,所述虚拟光心位于或基本上位于位置90上。虚拟光心90位于通过顶点70并垂直于底面50的直线上,距离顶点70为X。
虽然在本例中讨论了一种棱锥体结构,但是可以使用不同的平面镜几何结构来改变视野的方向,使得镜头具有基本上相同位置的光心。例如,可以使用实心的、空心的或局部多面体。此外,在棱锥体结构的情况下,不必存在物理上的底面和顶点,并且底面和顶点可以认为是概念上的辅助手段,例如底平面或底端以及顶点或顶端。
图3是说明棱锥体40的另一个图,为简明起见其中只示出了镜头54。镜头54位于直线72上,因而具有在棱锥体40内的位置90上的或靠近位置90的虚拟光心。如果镜头54沿垂直于底面50的方向具有90度的视野,并且如果镜头54的光心在沿着直线72离开顶点70为X距离处,则镜头54沿着箭头62的方向具有90度视野。用类似方式,镜头56,58和52沿着箭头64,66和60分别具有90度的视野。因为具有90度视野的镜头的低的成本,所以这种结构可以以低的成本产生360度的视野。
图4是棱锥体的顶视图。图4说明沿着直线72镜头54的光心的方位。直线72应当在通过顶点70并且平行于底面50的平面内。该直线还应当垂直于棱锥体40的基线74。镜头的光心应当位于沿着直线72离开顶点70的距离为X或基本上等于X的点上。点100位于底面50上,位于经过顶点70与底面50垂直相交的一点上。用类似方式,镜头56,58和52的光心分别被定位在沿着直线76,80和84的距离等于X或基本上等于X的点上。
图5说明8边的棱锥体120。棱锥体120具有反射表面122,其中每个反射表面122和通过顶点130并且平行于底面124的平面形成45度角。如图2的4边棱锥体一样,图5的每个反射表面可以具有和其相关的镜头。每个镜头的光心被设置在经过顶点130并且平行于底面124的平面内的直线上。该直线垂直于和要被定位的镜头相关的反射表面的基线132。使用8边棱锥体的优点在于,可以使用只具有45度水平视野的镜头获得360度的视野。只具有45度视野的镜头成本低,因而可以以低的成本构成具有360度视野的镜头。
图6是棱锥体120的顶视图。如参照图5所讨论的那样,每个镜头的光心沿着直线134被定位,直线134在经过顶点130并且平行于底面124的平面内。光心被定位在沿着直线134一个距离X或基本上等于X的一点上,直线134垂直于合适的基线132。点140位于底面124上,在底面124和经过顶点130并且垂直于底面124的直线的交点上。
可以使用具有或多或少的反射侧面的多面体或棱锥体。使用具有大量侧面的棱锥体的优点在于,可以使用具有适度的小视野的镜头。具有适度的视野的镜头具有相当廉价的镜片。在棱锥体中使用的侧面的数量受到提供大量镜头的成本的限制。使用具有3个反射侧面的棱锥体可以提供360度的视野。只使用具有3个反射侧面的棱锥体提供360度的视野的成本可能是高的。本发明的这个实施例使用3个镜头,每个具有120度底对底视野,具有这种大视野的镜头使用相当贵的光学元件。
在不需要360度的全视野的应用中,可以制造一种不具有和棱锥体的每个反射表面相关的镜头的观看器。通过使用部分棱锥体或部分多面体的反射元件,除去取消不需要的镜头之外,还可以消除不需要的棱锥体的多面体表面。
虽然在本例中讨论了棱锥体结构,但是也可以使用不同的平面镜几何结构,用来改变视野的方向,使得镜头具有基本上在同一位置的虚拟光心。例如,可以使用实心的,空心的或部分棱锥体。此外,在棱锥体结构的情况下,底面和顶点不必在物理上存在,并且可被认为是一种概念性的辅助手段,例如底平面或底端与顶点或顶点端。
图7说明用于控制由观看装置的镜头例如图2到图4所述的观看装置的镜头产生的数据的系统的方块图。镜头52,54,56和58通过其相关的棱锥体40的反射表面获得360度的视野。图像信号或镜头52,54,56和58的输出信号被分别通过模数转换器(A/D)160,162,164和166。这些镜头的输出可以认为是象素流,模数转换器的输出可被认为是代表来自镜头的数据。模数转换器的输出通过mux 170。mux 170使来自每个模数转换器的象素数据到达存储器阿72。控制器174循环接通mux 170的选择线,使得所有的模数转换器的输出都被存储在存储器172中。mux 170以4倍于镜头象素的速率被转换。如果使用或多或少的镜头,则mux 170被转换的速率被相应地增加或减少。也可以取消mux 170并把每个模数转换器的输出存储在一个单独的存储器中。控制器174使用微处理器实现,其向控制mux 170的转换的计数器和用于向存储器172提供地址的计数器提供控制信号。提供给计数器的控制信号包括复位信号、选通信号和开始偏移信号。
因为象素信息被送到存储器172,存储器172含有360度实况图。存储在存储器172内的象素信息通过数模转换器176被送到视频显示器178。通过数模转换器176被送到视频显示器178的存储器172的实际的部分通过用户输入装置180被控制。用户输入装置180可以是一种通用装置,例如鼠标,游戏棒,或键盘。用户可以简单地使游戏棒向右偏斜从而使其视野移向右方,使游戏棒向左偏斜是其视野移向左方,或者把游戏棒保持在中心位置而保持其视野不变。根据来自用户装置180的输入,控制器174改变偏移和用于提供对存储器172寻址的开始地址。
图8说明在由镜头提供的数据和用户可得到的图像之间的关系。因为镜头共用一个虚拟光心,所以可以认为图像是一个圆柱形的图像。扇区200可以认为代表由镜头52提供的信息,扇区202可以认为代表由镜头54提供的信息,扇区204可以认为代表由镜头56提供的信息,扇区206可以认为代表由镜头58提供的信息。在每个扇区的圆柱表面可以认为是列的集合,其中每个列由象素构成。例如,扇区200可以认为是包括列210,212,214和216的列的集合。同样,由镜头54产生的输出可以认为是在扇区202中包括列218的列的集合,镜头58的输出可以包括例如在扇区206中的列220。
图9说明存储器172如何被划分以便根据来自用户输入装置180的信号容易地存取不同的图像。部分230,232,234和236分别相应于扇区206,200,202和204。每个部分230,232,234和236可以认为是存储器172内的一个方块。在存储器172内的方块被分成按顺序编址的列。存储器部分230的第一列相应于扇区206的象素的第一列。和列有关的存储器位置的数量应当至少能够使在一个特定列中的每个象素具有一个位置。例如,如果图8中的一列象素包括1000个象素,和图9的存储器部分相关的每个列至少应当具有1000个位置。和特定的存储器部分有关的列的数量至少应当等于和图8中的圆柱的特定部分相关的列的数量。
如果镜头沿水平方向扫描,通过简单地改变对于计数器产生的地址的偏移,有顺序的象素便被写入特定存储器部分的相邻的列但可能不同行中。通过把偏移加到计数器的输出产生总的写地址。这个偏移以接收水平扫描的象素的速率被改变。在水平扫描完成之后,计数器加1,并再次以水平扫描的速率改变偏移。结果,当在一个写周期期间寻址特定的存储器部分时,通过以水平扫描的速率改变偏移对列进行寻址,并以垂直扫描的速率使计数器递增。使用这类寻址方法存取每个存储器部分内的列。当在写周期期间寻址不同的存储器部分时,一个写部分偏移被加到计数器输出和列偏移的和上。写部分偏移使得可以寻址存储器部分230,232,234,和236。部分偏移以mux 170被转换的速率被改变。
象素数据以类似方式被从存储器172中读出。使用计数器输出的和和两组偏移产生读地址。一旦选定初始的起始列,通过以等于视频显示的水平扫描速率的速率转换读列偏移产生读地址。在读出一个水平扫描值的数据之后读计数器被加1,并以等于显示的水平扫描速率的速率改变读列偏移。结果,偏移地址以显示的水平显示速率改变,并且计数器以等于显示的垂直扫描速率的速率递增。可以以比视频显示所需的速率较快或较慢的速率读出数据;不过,如果较快,则应当使用缓冲存储器,如果较慢,视频显示对观众可能出现不连续。
应当注意,图8的象素的圆柱排列一般在平的或接近平的显示器上被显示。结果,图像可以通过补偿在圆柱表面和平面之间的转换来被显示。这可以在普通的数字信号处理集成电路中利用简单的转换算法来实现。关于这类转换的方法在本领域中是熟知的,并且可以在“A Guided Tour of Computer Vision,VishvhitS.nalwa,Addison-Wisley PublishingCo.,Reading,Massachusetts,1993”中找到。还可以使用非常高的清晰度的显示器进行转换。
应当注意,如果由用户选择的视野精确地对应于特定镜头的视野,例如镜头52,则列240-248被从存储器170中读出。列240在部分232的第一列,列248在部分232的最后一列。如果用户决定沿反时针方向移动视野,则起始列向右方移动,使得读操作在列246开始而在列250结束。应当注意,列246是和具有来自镜头52的象素数据的存储器部分232相关的第二列,并且列250是和镜头56相关的象素数据的第一列。当用户移动其视野时,起始列按照用户的指令移动。例如,如果用户指示视野应当按反时针方向移动,则图9的起始列移向右方,类似地,如果用户指示视野应当按顺时针方向移动,则起始列移到左方。因为以前使用偏移对列进行寻址,如果偏移涉及在存储器部分之间的运动,则读部分偏移被加到列偏移和计数器输出的和中。
图10是控制器174的方块图。控制器174包括微处理器270和存储器272。存储器272包括RAM和ROM。处理器270接收在线274上来自用户输入装置180的指令。微处理器270控制计数器276的开始、停止和复位。计数器276控制mux 170的选择线。计数器726以4倍于镜头的水平扫描频率的速率计数。写地址发生器278对存储器172提供写地址。写地址发生器278包括计数器,用于存储偏移的寄存器和用于使偏移和计数器输出相加的加法器。微处理器270控制偏移选择和由写地址发生器278使用的计数器。按照图9所述形成写地址。读地址发生器280对存储器172提供读地址。读地址发生器280包括计数器,用于存储偏移的寄存器和用于使偏移和计数器输出相加的加法器。正如写地址发生器278的情况一样,微处理器270控制偏移选择和由读地址发生器280使用的计数器。微处理器270还根据在线274上由用户输入180提供的输入控制由计数器使用的起始列。
如果存储器172使用2端口存储器来实现,则写地址和读地址被分别提供给存储器172。如果存储器172利用1端口存储器来实现,则写地址和读地址被多路传输给存储器172。
图11说明具有第五个镜头的图2的观看系统。镜头或图像采集装置400棱锥体40中,使镜头400的光心位于虚拟光心90上或在虚拟光心90附近。镜头400沿箭头410的方向观看物体。和其余4个镜头的视野相连的合成视野提供接近球形的视野。如果图11的镜头利用图像产生装置代替,接近球形的观看系统则成为接近球形的投影系统。应当注意,镜头或者投影装置可以位于具有3面,4面或更多的面的棱锥体的观看/投影装置的虚拟光心。还应当注意,反射表面的底边420应当被斜削,以便避免对镜头400的视野的不希望的干扰。通过移动镜头或图像处理装置400,使其离开底边420,可以避免不希望的图像失真。装置400应当如此移动,使得其光心沿箭头410的方向离开虚拟光心90。装置400的光心应当这样设置,使得该装置使用的视野不包括边420。
图12说明图2的棱锥体的顶视图。参看图2,镜头52,54,56和58已被向着底面50的方向向上移动。结果,分别相应于镜头52,54,56和58的虚拟光心500,502,504和506被移开虚拟光心90。所需这样移动虚拟光心,使得镜头52捕获不受棱锥体的边缘影响的直线508和510之间的图像,镜头54捕获不受棱锥体的边缘影响的直线512和514之间的图像,镜头56捕获不受棱锥体的边缘影响的直线516和518之间的图像,镜头58捕获不受棱锥体的边缘影响的直线520和522之间的图像。这形成了这样的镜头,其不捕获由窄的平面形状的区域中的棱锥体的边缘引起的失真的图像。具体地说,平面区域524,526,528和530不被使用,因而形成盲区域。这提供的优点在于,除去了由反射棱锥体的边缘引起失真的图像区域。消除视野中的这些部分便不需提供用于补偿在边缘处的图像失真的图像处理。需要保持虚拟光心500,502,504和506被紧密地聚集,使得平面524,526,528和530只有所需的那样薄,从而避免边缘失真。通过保持这种薄的平面,便不需在图像的公共边界处理图像,同时使被用户看到的明显影响减到最小。
图13说明图12的棱锥体,其具有分别位于平面区域524,526,528和530内的阴影560,562,564和566。阴影减少了进入镜头的不想要的光的数量。类似的阴影可以位于装置400和一个或几个其它图像处理装置之间的盲区域中。也可以在使阴影位于底面50上,使阴影的边缘延长到底面边缘之外,以便减少来自底面50后方的源的进入镜头52,54,56和58的不想要的光的数量。
图14说明被设置在底对底结构中的反射棱锥体中的602和604。底面可以相互接触或者彼此分离。反射棱锥体602和604每个具有4个反射侧面。棱锥体602具有侧面608,610,612和614。反射棱锥体604具有反射侧面616,618,620和622。棱锥体602包括顶点624,棱锥体604包括顶点626。顶点624和626位于垂直于每个棱锥体底面的直线628上。每个棱锥体具有4个图像处理装置,例如具有其视野对着反射表面的镜头。关于棱锥体602,光心位于点630的镜头具有沿箭头632方向的视野,这是由反射表面608反射的视野。光心位于点634的镜头具有沿箭头636方向的视野,这是由反射表面610反射的视野。第三个镜头具有位于点638的光心,其具有沿箭头640方向的视野,这是由反射表面612反射的视野。第四个镜头具有位于点642的光心,其具有沿箭头644方向的视野,这是由反射表面614反射的视野。关于反射棱锥体604,第一个镜头具有位于点646的光心,其具有沿箭头648方向的视野,这是由反射表面616反射的视野。第二个镜头具有位于点650的光心,其具有沿箭头652方向的视野,这是由反射表面618反射的视野。第三个镜头具有位于点654的光心,其具有沿箭头656方向的视野,这是由反射表面620反射的视野。第四个镜头具有位于点658的光心,其具有沿箭头660方向的视野,这是由反射表面622反射的视野。和每个棱锥体相关的镜头的位置设置以和关于图2,3,4,11和12中的镜头的位置设置的方式相似的方式设置,使得每组4个镜头共用一个公共的虚拟光心,或者具有在其相关的棱锥体内的紧密聚集的虚拟光心。每组镜头也可以具有在其相关的棱锥体内的偏移的虚拟光心。镜头的位置可以被这样设置,使得和每个棱锥体相关的镜头沿着两个棱锥体的底面会合的直线628共用一个公共的虚拟光心。也可以这样设置,使得其偏移的虚拟光心聚集在两个棱锥体的底面会合的直线628的一点上。
图14的结构和参照图2,3,和4讨论的观看器相比增加了纵向视野。图14的观看器通过使用两个镜头而不是一个镜头用于相同的或接近相同的纵向范围来增加纵向视野。应当注意,可以通过利用图像产生装置代替镜头而构成投影器。应当注意,反射棱锥体602和604可以通过转动使彼此不对准。这个不对准关系通过围绕通过两个棱锥体的顶点的轴线转动一个或两个棱锥体来获得。例如,轴线可以是和直线628的共直线。作为转动的结果,棱锥体602的反射侧面的侧边将不再和棱锥体604的反射侧面侧边对准。
虽然在本例中讨论了棱锥体结构,可以使用不同的平面镜几何结构来改变视野,使得这些镜头具有基本上位于相同位置的虚拟光心。例如,可以使用实心的,空心的,或者局部的多面体。此外,在棱锥体结构的情况下,不必存在物理上的底面和顶点,并且可以认为这些是在概念上的辅助手段,例如底平面或底端,顶点或顶点端。
图15说明两个反射棱锥体。反射棱锥体702被嵌套在反射棱锥体704内。应当注意,也可以嵌套两个以上的棱锥体。例如,另一个反射棱锥体可以嵌套在反射棱锥体702内,而在该被嵌套的棱锥体内还可以再嵌套另一个反射棱锥体。棱锥体702的顶点706和棱锥体704的顶点708在垂直于两个棱锥体底面的直线710上。每个棱锥体还是包括4个图像处理装置,例如镜头,其中每个具有由其相关棱锥体改变的视野。棱锥体702包括反射侧面712,714,716和718。反射棱锥体704包括反射侧面720,722,724和726。4个镜头的位置被如此设置,使得其视野被棱锥体702的反射表面改变。第一个镜头具有在点730的光心和沿箭头732的方向的视野,该镜头具有由反射表面712改变的视野。第二个镜头具有在点734的光心和沿箭头736的方向的视野,该镜头具有由反射表面714改变的视野。第三个镜头具有在点738的光心和沿箭头740的方向的视野,该镜头具有由反射表面716改变的视野。第四个镜头具有在点742的光心和沿箭头744的方向的视野,该镜头具有由反射表面718改变的视野。应当注意,棱锥体702和其相关的镜头的位置被如此设置,使得镜头的视野不被棱锥体704妨碍。这通过使棱锥体702可以延伸到棱锥体704的底面之外来实现。关于棱锥体704,第一个镜头具有在点750的光心和沿箭头752的方向的视野,该镜头具有由反射表面720改变的视野。第二个镜头具有在点754的光心和沿箭头756的方向的视野,该镜头具有由反射表面722改变的视野。第三个镜头具有在点758的光心和沿箭头760的方向的视野,该镜头具有由反射表面724改变的视野。第四个镜头具有在点762的光心和沿箭头764的方向的视野,该镜头具有由反射表面726改变的视野。和每个棱锥体相关的镜头的位置按照图2-4,11,和12说明的位置设置,使得8个镜头共用一个在位置770的虚拟光心或具有紧密聚集在棱锥体702内的虚拟光心。每组镜头也可以具有在棱锥体702内的偏移的虚拟光心。
图15的全景观看器可以配备有第9个镜头,该镜头具有在点770的光心和由箭头772的方向的视野,用于提供具有局部球形视野的观看器。具有在点770的光心的镜头可以使用广角镜,以便提供较宽的视野。
图16说明具有附加的镜头的图15的局部球形观看器,所述附加镜头具有在点780的光心和沿箭头782的方向的视野,该视野被平面镜784改变。应当注意,光心780在通过棱锥体702和704的顶点以及虚拟光心770的直线710上。还应当注意,点780离开平面镜784的距离等于或大约等于平面镜784和虚拟光心770之间的距离。通过设置具有在点780的光心和具有由平面镜784改变的视野的镜头,图15的局部球形观看器成为球形观看器。为了增加具有在点780的光心的镜头的视野,该镜头可被配备广角镜。应当注意,平面镜784可以用曲面镜代替,以便对具有在点780的光心的镜头提供较宽的视野,并把需要广角镜的必要性减到最小。
虽然在本例中讨论了棱锥体结构,但是也可以使用不同的平面镜几何结构,用来改变视野的方向,使得镜头具有基本上在同一位置的虚拟光心。例如,可以使用实心的,空心的或局部多面体。此外,在棱锥体结构的情况下,底面和顶点不必在物理上存在,而是可被认为是一种概念性的辅助手段,例如底平面或底端与顶点或顶点端。
关于图15和图16,应当注意,可以通过利用图像产生装置代替镜头而构成投影器。还应当注意,反射棱锥体702和704可以通过转动使彼此不对准。这个不对准关系通过围绕通过两个棱锥体的顶点的轴线转动一个或两个棱锥体来获得。例如,轴线可以是和直线710的共直线。作为转动的结果,棱锥体702的反射侧面的侧边将不再和棱锥体604的反射侧面侧边对准。
图17说明用于支撑全景观看器的一种支架。反射棱锥体800使用支撑件例如空心管804被固定在支架或支柱802上。棱锥体在顶点端被固定在空心管804上。空心管使用角撑架808被固定在支架802上。空心管804延伸到顶点端806,使得镜头810可被管子804支撑住。镜头通过把镜头810压向垫片814的紧固夹板或皮带812被固定在管子804上。由夹具或夹板812提供的压力提供在镜头810、垫片814和管子804的外表面之间的摩擦,借以以牢固的方式把镜头810固定到管子804上。还应当在镜头810的端部816提供第二夹板和相关的垫片。通过电缆818对镜头810提供视频和电源连接,电缆818通过空管804送入,并通过在支柱802和棱锥体800的底面之间的空间802送出。应当注意,空管804可以用实心的支撑件代替;不过,空心的支撑件提供了方便的电缆进出通路。通过管子804送入电缆可以防止电缆进入镜头810的视野。橡胶垫或脚824被提供在棱锥体800的底端。这些垫可以用于代替柱802,当用户不想使用支柱802时,用于提供柔性。
也可以使图17的观看器反向,使得观看器被管子804的端部830支撑着。在这种结构中,电缆818将简单地通过管子804的端部830的开口穿出。在这种结构中,管子804使用类似于角撑架808的一个角撑架在端部830被固定到支柱802上。还可以把端部830固定到任何常规的结构上,以便支撑全景观看器。
图17的支架可以应用于图14-16的观看器。如参照图17所述,观看器被固定到通过两个棱锥体的顶点或顶端的空心管子上。
通过校准镜头系统可以产生高质量的图像。可以使用校准确定用于补偿不同类型的图像失真的图像映射功能(这可以作为查表来实现)。例如,可以使用映射功能校正由广角镜引入的筒形失真。可以使用映射功能校正其它类型的失真,例如由在镜头内的未对准的充电连接装置引起的转动失真。图18说明筒形失真和转动失真的组合,其中失真使矩形物体900呈现失真的图像902。失真的图像902相对于未失真的物体900被转动,并且看到筒形失真,其中矩形物体900的边缘904和906表现为图像902的边缘908和910,并且其中边缘912和914分别表现为916和918。这种失真可以使用通过校准镜头系统而确定的映射功能被校正。
图19说明用于校准镜头系统的处理。一列垂直的等间隔的椭圆点930被设置在固定位置内。这些点在黑色背景上是白的,其中椭圆点的主轴在垂直方向。全景镜头940围绕通过全景镜头的虚拟光心的轴线942以小的离散步骤转动。在每一步,观察一列椭圆点的失真的图像,确定对于那一数据顶端映射功能,以便除去失真。这一功能映射图像,使得等间隔点的每个垂直列的失真的图像在映射图像中是一列垂直的等间隔点。注意虽然在白点的图像之间具有黑色间隙,通过内插计算用于每个图像象素(包括在白点之间的象素)的映射功能。随着镜头转动,在每个离散步骤确定图像映射功能,这些映射功能的联合可以结合成为2-D对2-D变换,其不仅确保每个等间隔点的垂直列作为在图像中的等间隔点的垂直列出现,而且这些列在水平方向上和其图像采集之间的角度转动成正比地被分开,后者提供了场景的圆柱(而不是平的)图像。
图20和21说明表示垂直列的椭圆点表示为失真结果的情况。图20和图8的类似之处在于,图20说明由镜头提供的数据和用户可得到的图像之间的关系。应当注意,由于失真的结果,点的垂直列不处于图20中的一列中。失真使得点占据列960,962,964和966,而不仅仅是一列。图21和图9的类似之处在于,它说明图像是如何存储的。当失真的图像数据被存储在图21表示的存储器中时,代表点的数据也占据几个列,其中列980,982,984和986分别相应于图20的列960,962,964和966。当数据被从图21表示的存储器中读出时,在校准阶段确定的图像映射功能被用于校正这个失真。然后,校正的或未失真的图像数据可以被向用户显示,或被写入用于存储代表未失真的图像的数据的存储器中。图12说明从图21的存储器读出的数据和使用户得到的未失真的图像之间的关系。例如,和列1000相关的映射功能规定了当读出用于列1000的最上方部分中的数据时,数据被从列980读出,并在读用于列1000的下方的数据时,数据被从列982读出。映射功能还规定了,当读列1000中部的数据时,数据被从列984读出。进一步向列1000移动,然后数据被从列982读出,然后从列980读出,并且在最后当用于列1000底部的数据被恢复时,从列986中读出。作为读数据的结果,如映射功能所规定的,出现的数据的列对于观看显示器的用户将是垂直的。图22说明从图21的存储器中恢复的数据现在作为垂直的列出现,其中失真不再明显。对于图22的每个列使用在校准期间确定的类似的映射功能,产生用于显示的未失真的图像。应当注意,用于校准全景镜头的多个离散的转动步骤可以用图12中所示的包括几个列的组代替。
也可以使用类似于图19所示的步骤进行颜色和强度的校准。在这种情况下,椭圆点的列930被用已知的颜色图形代替。然后转动全景镜头,使得每个镜头捕捉颜色图形的图像。若干颜色图形(例如红绿蓝和灰的若干阴影)可被逐一地使用。然后根据逐个象素调整来自每个镜头的数据,以便校正上述颜色中任何一个的失真,使得产生的图像具有接近和校准颜色图形匹配的颜色图形。此外,来自每个镜头的每个象素的强度被这样调整,使得当利用恒定的颜色和亮度观看场景时,在一个镜头的图像内和在多个镜头的图像之间,具有相当均匀的强度。如同对映射功能所讨论的,逐个象素的调整可以存储在表中。可以使用不太精确但是较简单的颜色和强度计算方法。该方法只涉及手动地调整每个镜头的颜色和强度控制,使得当利用特定的颜色和强度观看场景时,得到正确的颜色和强度。应当注意,通过使用这种方法,一个特定镜头的所有象素都要接受相同的调整。
图23说明一种全景镜头系统,其中使用根据图像映射校正的调整。图23和图7类似;不过,应当注意,其中包括帧缓冲存储器和附加的微处理器。镜头52,54,56,和58采集图像数据,然后把数据分别送到模数转换器160,162,164和166。模数转换器的输出然后被通过红绿蓝以及强度调整单元1010,1012,1014和1018。如果这些单元是模拟单元,可以把这些单元置于模数转换器之前。此外,也可以使用具有在每个镜头内内装的调整单元的镜头。在任何情况下,调整单元被编程或被设置用于调整由计算确定的颜色和强度。这些单元的每一个单元调整红绿蓝的值和来自模数转换器的信号的整个值。应当注意,如果镜头52-58是彩色镜头,则模数转换器160-166一般接收3个信号并输出3个信号,其中每对输入输出信号相应于红绿蓝颜色中的一个。单元1010-1016按照在校正过程期间确定的设置,简单地调整红绿蓝信号的相对幅值。每个单元1010-1018也按照总的强度校正设置调整红绿蓝信号的整个幅值。然后,红绿蓝强度调整的输出通过图7中所讨论的多路转换器,并通过帧缓冲器1030。还可以利用对于红绿蓝和强度单元1010,1012,1-14,和1018的每一个单元的单独的帧缓冲器代替帧缓冲器1030。然后,每个单独的帧缓冲器的输出经过多路转换器170被送到微处理器1030。
帧缓冲器1030按照类似于图7的存储器172的方式被操作,并存储代表失真的图像的数据,如结合图21讨论的那样。然后,微处理器1040使用在校正处理期间确定映射功能从帧缓冲器1030读出数据,并把数据写入显示存储器1050中。回忆结合图22的讨论可知,然后,代表未失真的图像的数据被存储在存储器1050中,供用户检索使用。用户可以按照图7的讨论检索数据,其中读出的数据根据用户的输入确定。也可以使每个用户能够得到显示存储器的整个内容。数据可以通过通信网络例如电话网络或数据网络和每个用户通信,或者可以通过专用线路或无线电通信通路直接和用户通信。然后,用户可以使用模数转换器把数据转换成可供用户显示的模拟格式,或者用户可以直接地使用数字数据而不使用数模转换器。
图24说明具有反射表面1202,1204,1206和1208的反射棱锥体1200。线1210是通过棱锥体1200的顶点1212并且和棱锥体的底面1214垂直的棱锥体的轴线。棱锥体1200和参照图2和3讨论的棱锥体类似。不过,在这种情况下,不是一个虚拟光心,而是提供有两个虚拟光心。虚拟光心1214和1216被用于提供立体全景观看器。为了真实地模拟正常人的视觉,需要虚拟光心1214和1216在水平方向上分开的距离近似等于人的两个眼睛之间的一般距离。每个虚拟光心1214和1216和一组镜头相关,其中在所述组中的每个镜头具有由棱锥体的反射表面改变的视野,使得被改变的视野的部分基本上是邻接的。镜头按照图2和17讨论的方式被设置和支撑,不过,镜头被如此设置,使得每组镜头具有离开棱锥体的中心的虚拟光心。对于每个光心的镜头以和图2和图3的方式类似的方式被设置,不过,镜头被如此设置,使得两组镜头中的每一个具有不同的虚拟光心,其中一组镜头具有在点1214的虚拟光心,另一组镜头具有在点1216的虚拟光心。
图25说明当沿着轴线1210并沿着图24的箭头1218的方向从底面看时的棱锥体1200。应当注意,虚拟光心1214和1216在水平方向与中心轴线1210分开的距离近似等于人的两个眼睛之间的距离。在这个例子中,虚拟光心1214和1216位于通过轴线1210的线AA上。
图26说明沿图24和25的线AA取的棱锥体1200的截面图。为简明起见,只示出了虚拟光心1214;不过,对于和虚拟光心1214有关的镜头的定位技术可以用于另一个分开的虚拟光心,例如虚拟光心1216。点1230代表其视野被棱锥体1200的反射表面1202改变的镜头的光心。光心1230被如此定位,使得其和反射表面1202的垂直距离1232等于虚拟光心1214和反射表面1202之间的垂直距离1234。同样,点1238代表其视野被反射表面1204改变的镜头的光心。光心1238被如此定位,使得其和反射表面1204的垂直距离1240等于虚拟光心1214和反射表面1204之间的垂直距离1242。
图27说明沿图25的CC线取的棱锥体1200的截面图。点1250代表其视野被反射表面1208改变的镜头的光心。点1252代表其视野被反射表面1206改变的镜头的光心。点1250被如此定位,使得其和反射表面1208的垂直距离1254等于反射表面1208和虚拟光心1214之间的垂直距离1256。光心1252被如此定位,使得其和反射表面1202的垂直距离1258等于反射表面1202和虚拟光心1214之间的垂直距离1260。
图28说明和虚拟光心1214有关的并被如此设置使得每个镜头的光心按照图26和27排列的镜头。光心在位置1230的镜头具有沿箭头1260方向的视野和由反射表面1202改变的视野,从而使得和点1230有关的镜头的虚拟光心位于虚拟光心1214。光心在位置1250的镜头具有沿箭头1262方向的视野,该视野由反射表面1208改变,这使得和点1250有关的镜头具有在点1214的虚拟光心。类似地,光心在位置1252的镜头具有沿箭头1264方向的视野,该视野由表面1206改变,这使得和点1252有关的镜头具有在点1214的虚拟光心。同样,光心在位置1238的镜头具有沿箭头1266方向的视野,该视野由表面1204改变,这使得和位置1238有关的镜头具有在点1214的虚拟光心。可以按照关于图26和27讨论的那样定位一组类似的镜头,使得可以在点1216形成第二虚拟光心。为筒明起见,和虚拟光心1216有关的附加镜头没有示出。
应当注意,对于每个虚拟光心1214和1216都产生完整的全景图像。和每个虚拟光心有关的图像被按照图7和23所述的方法处理。不过,在这种情况下,当用户需要图像时,则提供两个图像;最好一个代表左方,一个代表右方,其中左图像被提供给用户的左眼,而右图像被提供给用户的右眼。这便提供了立体图像,该图像相当于用户从棱锥体内部利用位于虚拟光心1214的一个眼和位于虚拟光心1216的另一个眼观看事物时得到的图像。此外,应当注意,和每个镜头相关的虚拟光心并不精确地位于一个位置或一个点,例如虚拟光心1214。这些光心可以紧密地聚集在点1214的周围,这是由于要精确地对准镜头是困难的。此外,需要特意地使和这些镜头有关的虚拟光心聚集在点1214的周围,使得产生一组偏离的虚拟光心,这将引起如参照图12所述的盲区。这些盲区可以用于除去由于棱锥体的边缘而引起的可能失真的图像部分,在所述棱锥体的边缘遇到不同的反射表面。
图29说明反射棱锥体1300。其具有通过棱锥体的顶点并且垂直于棱锥体的底的轴线1302。该棱锥体是全景观看器的一部分,其具有3个虚拟光心1304,1306和1308。每个虚拟光心具有一组按照图26和27的讨论而设置的镜头。虚拟光心离开轴线1302的距离1310是相等的,并被如此设置,使得它们每个相互之间离开一个距离1312,该距离1312近似等于人眼之间的一般距离。这种结构形成和全景图像相关的每个虚拟光心。
图30是从棱锥体的外部在底面向下看的棱锥体1300的视图。图30说明使用那一对虚拟光心向用户提供图像。被使用的虚拟光心对取决于用户希望观看的方向。作为基准,示出了线1320,1322和1324。线1320通过虚拟光心1304和轴线1302。线1322通过虚拟光心1308和轴线1302。同样,线1324通过虚拟光心1306和轴线1302。应当注意,线1322的箭头1326可以认为是由虚拟光心1306和1304沿箭头1326的方向呈现的图像的中心。此外,线1324的箭头1328可以认为是由虚拟光心1308和1304沿箭头1328的方向提供的图像的中心。线1320的箭头1330可以认为是由虚拟光心1306和1308沿箭头1330的方向呈现的图像的中心。线1322的箭头1332可以认为是由虚拟光心1306和1304沿箭头1332的方向提供的图像的中心。线1324的箭头1334可以认为是由虚拟光心1304和1308沿箭头1334的方向提供的图像的中心。线1320的箭头1336可以认为是由虚拟光心1306和1308沿箭头1336的方向提供的图像的中心。这样,虚拟光心的不同的有序对最好用于沿不同方向的立体图像。当用户改变观看的方向时,将改变用于向左眼和右眼提供图像的虚拟光心。当观看其中心在线1340和1342之间的图像时,分别由虚拟光心1306和1304供给向用户的左眼和右眼提供的图像。当观看其中心在线1342和1344之间的图像时,分别由虚拟光心1308和1304供给向用户的左眼和右眼提供的图像。当用户观看其中心在线1344和1346之间的图像时,左眼和右眼分别接收来自虚拟光心1308和1306的图像。当用户观看其中心在线1348和1346之间的图像时,分别由虚拟光心1304和1306向用户提供左图像和右图像。当用户观看其中心在线1350和1348之间的图像时,分别从虚拟光心1304和1308向用户提供左图像和右图像。最后,当用户观看其中心在线1340和1350之间的图像时,分别从虚拟光心1306和1308向左眼和右眼提供图像。
图31说明从外部在底面看的反射棱锥体1400,所述棱锥体具有通过其顶点并且垂直于棱锥体底面的轴线1402。棱锥体1400具有8组和8个虚拟光心1404,1406,1408,1410,1412,1414,1416和1418相关的镜头。这些虚拟光心具有距轴线1402相等的距离1420。每对相对的虚拟光心,例如光心1404和1412的距离是距离1420的两倍。两倍于距离1420的距离应当大致等于一对人眼之间的距离。
图32说明图31的全景观看器,其中具有用于说明根据观众希望观看的方向使用哪对虚拟光心提供图像的参考线。参考线1430通过虚拟光心1406,轴线1402和虚拟光心1414。参考线1432通过虚拟光心1408,轴线1402和虚拟光心1418。参考线1436通过虚拟光心1412,轴线1402和虚拟光心1404。在这个例子中,当用户要求参考线的22.5度内的图像时,则使用和该参考线相关的虚拟光心和那个观看方向向用户提供左图像和右图像。当用户要求沿线1430的箭头1438的方向并且在线1440和1442之间的图像时,观众使用来自虚拟光心1410的图像作为左眼图像,并使用来自虚拟光心1418的图像作为右眼图像。当用户要求沿线1432的箭头1444的方向并且在线1446和1442之间的图像时,则分别由虚拟光心1412和1404提供左右图像。当用户要求沿线1434的箭头1448的方向并且在线1450和1446之间的图像时,则分别由虚拟光心1414和1406提供左右图像。当用户要求沿线1436的箭头1452的方向并且在线1454和1450之间的图像时,则分别由虚拟光心1416和1408提供左右图像。当用户要求沿线1430的箭头1456的方向并且在线1454和1458之间的图像时,则分别由虚拟光心1418和1410提供左右图像。当用户要求沿线1432的箭头1460的方向并且在线1458和1462之间的图像时,则分别由虚拟光心1404和1412提供左右图像。当用户要求沿线1434的箭头1464的方向并且在线1466和1462之间的图像时,则分别由虚拟光心1406和1414提供左右图像。当用户要求沿线1634的箭头1468的方向并且在线1440和1466之间的图像时,则分别由虚拟光心1408和1416提供左右图像。
虽然在本例中讨论了一种棱锥体结构,但是可以使用不同的平面镜几何结构来改变视野的方向,使得镜头具有基本上相同位置的光心。例如,可以使用实心的、空心的或局部多面体。此外,在棱锥体结构的情况下,不必存在物理上的底面和顶点,并且底面和顶点可以认为是概念上的辅助手段,例如底平面或底端以及顶点或顶端。
图33说明具有3个虚拟光心的立体全景观看系统的方块图。该方块图和图23的相似之处在于,每组镜头具备的功能和图23的类似。在本例中,镜头组1500,1502和1504分别相应于图29的虚拟光心1304,1306,和1308。在本例中,每个镜头组包括4个镜头。每个镜头组的输出被红绿蓝校正电路1506接收。红绿蓝校正电路1506的操作和参照图23的电路所述的操作类似。红绿蓝校正电路1506的输出被存储在帧存储单元1508中。代表由镜头捕捉的图像的数据使用由控制器1510提供的地址被写入帧存储器中。控制器1510向帧存储器提供地址,如参照图23和29所述。控制器1510可以使用专用的硬件例如ASIC(特殊用途集成电路)、微型机计算机或微处理器来实现。数据从帧存储器1508中读出,在微处理器1514的控制下被送到显示存储器1512中。当把数据写入显示存储器1512中时,微处理器使用图像变换校正由镜头系统产生的失真。这种图像变换处理和参照图20-22所述的类似。来自显示存储器1512的输出以和参照图7-9讨论的方式类似的方式由控制器1510寻址。这些输出可以根据规定要观看的方向的用户的输入被提供。显示存储器1512的输出被提供给一个开关,该开关在本实施例中作为左多路传输器1516和右多路传输器1518来实现。每个多路传输器被用于选择来自和一个虚拟光心相关的镜头组的图像数据。例如所述开关可以使用机械开关、具有选择选通的存储器的总线、或者用于访问选择的存储器的微型计算机或微处理器来实现。和特定的虚拟光心相关的图像数据的选择根据通过用户输入由用户选择的图像在控制器1510的控制下进行。响应用户输入而提供的实际图像数据按照参照图10的讨论被提供。也可以提供对于每个虚拟光心的全部显示存储器输出供用户观看和编辑。然后由多路传输器1516和1518提供的左右图像数据被提供给调制解调器1520以便通过通信网络1522传递。如果通信网络1522直接接收数字数据,则可以取消调制解调器1520。来自通信网络1522的数据被调制解调器1524接收,调制解调器1524然后把数据提供给左右显示器1526和1528。如果显示器1526和1528需要模拟数据,则可以在调制解调器1524和显示器之间设置数模转换器。如果需要,可以设置用户输入装置1530,例如可以是游戏杆,其通过调制解调器1524、通信网络1522和调制解调器1520向控制器1510提供用户选择的数据。如果用户距离观看系统不远,则来自多路传输器1516和1518的数据可以直接通过到达左显示1512和右显示1534。如果显示需要模拟数据,则可以使用数模转换器1536和1538分别向左显示1532和右显示1534提供数据。此外,可以使用用户输入装置1540向控制器1510提供用户选择的数据。
如果观看系统使用附加的虚拟光心例如参照图32所述的系统,则可以对图33的基本结构增加附加的处理路径。参见图34,应当注意,在镜头组1500,1502和1504中的镜头数量可以改变。例如,如果只使用4面棱锥体中的3面进行观看,则在镜头组内只需要包括3个镜头。
应当注意,控制器1510和微处理器1514可以结合成为一个微处理器,微型计算机或者具有足够的处理速度的计算机,以便为所讨论的功能提供地址。类似地,帧存储器和显示存储器可以结合成为一个存储器,该存储器被这样编址,使得可以存取和图33中的每个存储器相关的数据。

Claims (10)

1一种全景观看设备,其特征在于:
多个第一图像处理装置,每个具有一个视野;
多个第二图像处理装置,每个具有一个视野;以及
面向不同方向的多个平的反射面,其中至少每两个反射面改变一个第一图像处理装置和一个第二图像处理装置的视野,使得至少两个第一图像处理装置的被改变的视野的至少一部分基本上是邻接的,并且至少两个第二图像处理装置的被改变的视野的至少一部分基本上是邻接的。
2如权利要求1所述的全景观看设备,其特征在于,所述图像处理装置是镜头。
3如权利要求1所述的全景观看设备,其特征在于,所述图像处理装置是投影器。
4一种全景观看设备,其特征在于:
多个第一图像处理装置,每个具有一个视野;
多个第二图像处理装置,每个具有一个视野;
多个第三图像处理装置,每个具有一个视野;以及
面向不同方向的多个平的反射面,其中至少每两个反射面改变一个第一图像处理装置和一个第二图像处理装置以及一个第三图像处理装置的视野,使得至少两个第一图像处理装置的被改变的视野的至少一部分基本上是邻接的,至少两个第二图像处理装置的被改变的视野的至少一部分基本上是邻接的,并且至少两个第三图像处理装置的被改变的视野的至少一部分基本上是邻接的。
5如权利要求4所述的全景观看设备,其特征在于,所述图像处理装置是镜头。
6如权利要求4所述的全景观看设备,其特征在于,所述图像处理装置是投影器。
7一种全景观看设备,其特征在于:
多个用于产生第一组图像信号的第一图像处理装置,每个具有一个视野;
多个用于产生第二组图像信号的第二图像处理装置,每个具有一个视野;
多个用于产生第三组图像信号的第三图像处理装置,每个具有一个视野;
面向不同方向的多个平的反射面,其中至少每两个反射面改变一个第一图像处理装置和一个第二图像处理装置以及一个第三图像处理装置的视野,使得至少两个第一图像处理装置的被改变的视野的至少一部分基本上是邻接的,至少两个第二图像处理装置的被改变的视野的至少一部分基本上是邻接的,并且至少两个第三图像处理装置的被改变的视野的至少一部分基本上是邻接的;
控制器,其产生识别多个图像数据组中的图像数据组对的控制信号,其中每个图像数据组表示一组图像信号;以及
用于响应所述控制信号选择图像数据组对的开关。
8如权利要求7所述的全景观看设备,其特征在于,所述开关是多路传输器。
9如权利要求7所述的全景观看设备,其特征在于,所述开关是计算机。
10如权利要求7所述的全景观看设备,其特征在于,所述控制器根据观看方向识别图像数据组对。
CN99118076A 1998-08-28 1999-08-25 立体全景观看系统 Pending CN1247994A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US09/141,867 1998-08-28
US09/141,867 US6141145A (en) 1998-08-28 1998-08-28 Stereo panoramic viewing system

Publications (1)

Publication Number Publication Date
CN1247994A true CN1247994A (zh) 2000-03-22

Family

ID=22497611

Family Applications (1)

Application Number Title Priority Date Filing Date
CN99118076A Pending CN1247994A (zh) 1998-08-28 1999-08-25 立体全景观看系统

Country Status (7)

Country Link
US (1) US6141145A (zh)
EP (1) EP0989436A3 (zh)
JP (2) JP3862895B2 (zh)
KR (1) KR20000017592A (zh)
CN (1) CN1247994A (zh)
CA (1) CA2277712C (zh)
TW (1) TW396292B (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101980080A (zh) * 2010-09-19 2011-02-23 华为终端有限公司 共光心摄像机、图像处理方法及装置
CN103391393A (zh) * 2012-05-08 2013-11-13 索尼公司 透镜可互换照相系统、数据传输方法及透镜数据获取程序
CN104317059A (zh) * 2014-11-14 2015-01-28 山东理工大学 幻影立体实时显示系统及其显示方法
CN106060523A (zh) * 2016-06-29 2016-10-26 北京奇虎科技有限公司 全景立体图像采集、显示方法及相应的装置
CN106331671A (zh) * 2015-06-16 2017-01-11 纬创资通股份有限公司 立体影像显示装置、立体影像显示方法以及影像显示系统
CN106415386A (zh) * 2014-06-20 2017-02-15 高通股份有限公司 使用无视差及倾斜伪影的折叠式光学器件的多相机系统
CN106842801A (zh) * 2016-08-31 2017-06-13 李文松 一种vr摄影镜头设计方法
US10165183B2 (en) 2012-10-19 2018-12-25 Qualcomm Incorporated Multi-camera system using folded optics

Families Citing this family (88)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7015954B1 (en) * 1999-08-09 2006-03-21 Fuji Xerox Co., Ltd. Automatic video system using multiple cameras
US6795109B2 (en) 1999-09-16 2004-09-21 Yissum Research Development Company Of The Hebrew University Of Jerusalem Stereo panoramic camera arrangements for recording panoramic images useful in a stereo panoramic image pair
US7477284B2 (en) * 1999-09-16 2009-01-13 Yissum Research Development Company Of The Hebrew University Of Jerusalem System and method for capturing and viewing stereoscopic panoramic images
JP2004512701A (ja) * 2000-04-19 2004-04-22 イッサム リサーチ ディベロップメント カンパニー オブ ザ ヘブリュー ユニバーシティ オブ エルサレム 立体パノラマ画像の撮像と表示を行うシステムと方法
KR100343836B1 (ko) * 2000-06-27 2002-07-20 이성환 파노라마 영상 감시 시스템 및 그 제어방법
WO2002008817A2 (en) * 2000-07-21 2002-01-31 Lee Scott Friend Stereoscopic omnidirectional imaging devices
US6560413B1 (en) 2001-03-14 2003-05-06 Enroute, Inc. High-precision panoramic imaging system
US6386719B1 (en) 2001-03-14 2002-05-14 Enroute, Inc. Precision mounting of front surface mirrors
US6937266B2 (en) * 2001-06-14 2005-08-30 Microsoft Corporation Automated online broadcasting system and method using an omni-directional camera system for viewing meetings over a computer network
US7349005B2 (en) * 2001-06-14 2008-03-25 Microsoft Corporation Automated video production system and method using expert video production rules for online publishing of lectures
US6628897B2 (en) * 2001-06-20 2003-09-30 Sony Corporation Camera system
US6954695B2 (en) 2002-01-31 2005-10-11 Racing Visions, Llc Apparatus system and method for remotely controlling a vehicle over a network
US20040077284A1 (en) * 2002-01-31 2004-04-22 Bonilla Victor G. Apparatus system and method for adapting a scaled vehicle remote controller for use with an enhanced controller
US20040005927A1 (en) * 2002-04-22 2004-01-08 Bonilla Victor G. Facility for remote computer controlled racing
US20040077285A1 (en) * 2002-04-22 2004-04-22 Bonilla Victor G. Method, apparatus, and system for simulating visual depth in a concatenated image of a remote field of action
US20030231244A1 (en) * 2002-04-22 2003-12-18 Bonilla Victor G. Method and system for manipulating a field of view of a video image from a remote vehicle
US7050889B2 (en) * 2002-04-22 2006-05-23 Racing Visions Investments Inc. Method and system for a computer controlled racing network
US7260257B2 (en) 2002-06-19 2007-08-21 Microsoft Corp. System and method for whiteboard and audio capture
US7598975B2 (en) * 2002-06-21 2009-10-06 Microsoft Corporation Automatic face extraction for use in recorded meetings timelines
US20050046703A1 (en) * 2002-06-21 2005-03-03 Cutler Ross G. Color calibration in photographic devices
US7602412B2 (en) * 2002-06-21 2009-10-13 Microsoft Corporation Temperature compensation in multi-camera photographic devices
US7782357B2 (en) 2002-06-21 2010-08-24 Microsoft Corporation Minimizing dead zones in panoramic images
US7259784B2 (en) 2002-06-21 2007-08-21 Microsoft Corporation System and method for camera color calibration and image stitching
US7298392B2 (en) * 2003-06-26 2007-11-20 Microsoft Corp. Omni-directional camera design for video conferencing
US7852369B2 (en) * 2002-06-27 2010-12-14 Microsoft Corp. Integrated design for omni-directional camera and microphone array
US7149367B2 (en) * 2002-06-28 2006-12-12 Microsoft Corp. User interface for a system and method for head size equalization in 360 degree panoramic images
US7184609B2 (en) * 2002-06-28 2007-02-27 Microsoft Corp. System and method for head size equalization in 360 degree panoramic images
US7463280B2 (en) 2003-06-03 2008-12-09 Steuart Iii Leonard P Digital 3D/360 degree camera system
US7443807B2 (en) * 2003-06-16 2008-10-28 Microsoft Corporation System and process for discovery of network-connected devices
US7525928B2 (en) * 2003-06-16 2009-04-28 Microsoft Corporation System and process for discovery of network-connected devices at remote sites using audio-based discovery techniques
US7397504B2 (en) * 2003-06-24 2008-07-08 Microsoft Corp. Whiteboard view camera
US7343289B2 (en) * 2003-06-25 2008-03-11 Microsoft Corp. System and method for audio/video speaker detection
US7428000B2 (en) * 2003-06-26 2008-09-23 Microsoft Corp. System and method for distributed meetings
US20050117015A1 (en) * 2003-06-26 2005-06-02 Microsoft Corp. Foveated panoramic camera system
US7495694B2 (en) * 2004-07-28 2009-02-24 Microsoft Corp. Omni-directional camera with calibration and up look angle improvements
US7362350B2 (en) * 2004-04-30 2008-04-22 Microsoft Corporation System and process for adding high frame-rate current speaker data to a low frame-rate video
US7355623B2 (en) * 2004-04-30 2008-04-08 Microsoft Corporation System and process for adding high frame-rate current speaker data to a low frame-rate video using audio watermarking techniques
US7355622B2 (en) * 2004-04-30 2008-04-08 Microsoft Corporation System and process for adding high frame-rate current speaker data to a low frame-rate video using delta frames
JP2006033570A (ja) * 2004-07-20 2006-02-02 Olympus Corp 画像生成装置
US7593057B2 (en) * 2004-07-28 2009-09-22 Microsoft Corp. Multi-view integrated camera system with housing
US20060103723A1 (en) * 2004-11-18 2006-05-18 Advanced Fuel Research, Inc. Panoramic stereoscopic video system
US7812882B2 (en) * 2004-12-30 2010-10-12 Microsoft Corporation Camera lens shuttering mechanism
US7768544B2 (en) * 2005-01-21 2010-08-03 Cutler Ross G Embedding a panoramic image in a video stream
US7982777B2 (en) * 2005-04-07 2011-07-19 Axis Engineering Technologies, Inc. Stereoscopic wide field of view imaging system
GB2425363A (en) 2005-04-18 2006-10-25 Sharp Kk Panoramic adapter with mirrors formed by rotating conic section
US7573868B2 (en) * 2005-06-24 2009-08-11 Microsoft Corporation Audio/video synchronization using audio hashing
US7630571B2 (en) * 2005-09-15 2009-12-08 Microsoft Corporation Automatic detection of panoramic camera position and orientation table parameters
KR100765209B1 (ko) * 2006-03-23 2007-10-09 삼성전자주식회사 전방향 스테레오 카메라 및 그 제어 방법
JP4562683B2 (ja) * 2006-04-19 2010-10-13 株式会社藤商事 遊技機
US7653705B2 (en) * 2006-06-26 2010-01-26 Microsoft Corp. Interactive recording and playback for network conferencing
US20070299710A1 (en) * 2006-06-26 2007-12-27 Microsoft Corporation Full collaboration breakout rooms for conferencing
US20070300165A1 (en) * 2006-06-26 2007-12-27 Microsoft Corporation, Corporation In The State Of Washington User interface for sub-conferencing
US8572183B2 (en) * 2006-06-26 2013-10-29 Microsoft Corp. Panoramic video in a live meeting client
US20080298674A1 (en) * 2007-05-29 2008-12-04 Image Masters Inc. Stereoscopic Panoramic imaging system
MY155821A (en) * 2007-11-23 2015-12-07 Mimos Berhad Single camera stereo imaging system
JP5099554B2 (ja) * 2008-07-31 2012-12-19 独立行政法人情報通信研究機構 立体ディスプレイ
CN101852980B (zh) * 2010-06-09 2011-10-05 长春理工大学 一种在cave投影系统上交互式播放全景视频流的方法
US9485495B2 (en) 2010-08-09 2016-11-01 Qualcomm Incorporated Autofocus for stereo images
FR2964757B1 (fr) * 2010-09-09 2013-04-05 Giroptic Dispositif optique pour la capture d'images selon un champ de 360°
CN102486274A (zh) * 2010-12-06 2012-06-06 中强光电股份有限公司 光源模块与舞台灯具
US20120154519A1 (en) * 2010-12-17 2012-06-21 Microsoft Corporation Chassis assembly for 360-degree stereoscopic video capture
US9390752B1 (en) * 2011-09-06 2016-07-12 Avid Technology, Inc. Multi-channel video editing
US9438889B2 (en) 2011-09-21 2016-09-06 Qualcomm Incorporated System and method for improving methods of manufacturing stereoscopic image sensors
US20130250040A1 (en) * 2012-03-23 2013-09-26 Broadcom Corporation Capturing and Displaying Stereoscopic Panoramic Images
JP2014081510A (ja) 2012-10-17 2014-05-08 Sony Corp 表示装置
US20140362176A1 (en) * 2013-01-05 2014-12-11 Patrick A. St. Clair Spherical panoramic imaging system
CA2909493C (en) 2013-04-16 2018-01-23 Christian Weissig Alignment of a camera system, camera system and alignment aid
DK2835973T3 (da) 2013-08-06 2015-11-30 Sick Ag 3D-kamera og fremgangsmåde til registrering af tredimensionale billededata
US10178373B2 (en) 2013-08-16 2019-01-08 Qualcomm Incorporated Stereo yaw correction using autofocus feedback
TWI510811B (zh) * 2013-09-13 2015-12-01 Quanta Comp Inc 頭戴式系統
US9196039B2 (en) 2014-04-01 2015-11-24 Gopro, Inc. Image sensor read window adjustment for multi-camera array tolerance
US9383550B2 (en) 2014-04-04 2016-07-05 Qualcomm Incorporated Auto-focus in low-profile folded optics multi-camera system
US9374516B2 (en) 2014-04-04 2016-06-21 Qualcomm Incorporated Auto-focus in low-profile folded optics multi-camera system
US9618760B2 (en) * 2014-05-24 2017-04-11 Alan Bruce Cornford Collapsible quasi 3D stereoscopic display and cover
US9185391B1 (en) 2014-06-17 2015-11-10 Actality, Inc. Adjustable parallax distance, wide field of view, stereoscopic imaging system
US10013764B2 (en) 2014-06-19 2018-07-03 Qualcomm Incorporated Local adaptive histogram equalization
US9386222B2 (en) 2014-06-20 2016-07-05 Qualcomm Incorporated Multi-camera system using folded optics free from parallax artifacts
US9819863B2 (en) 2014-06-20 2017-11-14 Qualcomm Incorporated Wide field of view array camera for hemispheric and spherical imaging
US9549107B2 (en) 2014-06-20 2017-01-17 Qualcomm Incorporated Autofocus for folded optic array cameras
US9541740B2 (en) 2014-06-20 2017-01-10 Qualcomm Incorporated Folded optic array camera using refractive prisms
US10057542B2 (en) 2014-08-15 2018-08-21 Thereo LLC System for immersive telepresence
US9832381B2 (en) 2014-10-31 2017-11-28 Qualcomm Incorporated Optical image stabilization for thin cameras
US9967446B2 (en) 2015-09-09 2018-05-08 Itx-M2M Co., Ltd. Personalized shopping mall system using virtual camera
KR20170030421A (ko) * 2015-09-09 2017-03-17 주식회사 아이티엑스엠투엠 가상 카메라를 이용한 개인화된 쇼핑몰 시스템
USD858614S1 (en) * 2016-06-27 2019-09-03 Virtual Marketing Incorporated Mobile hologram apparatus
TWI672677B (zh) * 2017-03-31 2019-09-21 鈺立微電子股份有限公司 用以融合多深度圖的深度圖產生裝置
TWI642973B (zh) * 2017-09-12 2018-12-01 晶將數位多媒體科技股份有限公司 3D floating stereoscopic image creation and display device
US10951859B2 (en) 2018-05-30 2021-03-16 Microsoft Technology Licensing, Llc Videoconferencing device and method

Family Cites Families (53)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2304434A (en) * 1928-09-03 1942-12-08 Ibm Projecting device
US2267813A (en) * 1938-11-05 1941-12-30 Gen Electric Multicathode ray electrode assembly
FR1206316A (fr) * 1957-07-19 1960-02-09 Procédé et dispositifs de prises de vues panoramiques, en particulier pour les appareils de prises de vues cinématographiques
US3144806A (en) * 1962-09-28 1964-08-18 Rowe E Carney Jr Projection system
US3286590A (en) * 1963-02-21 1966-11-22 Conductron Corp Full circumferential viewing system
US3420605A (en) * 1965-06-14 1969-01-07 Vernon L Kipping Wide field photography and projection
FR1528819A (fr) * 1967-04-27 1968-06-14 Precitronic Récepteur omni-directionnel de signaux lumineux
US3506344A (en) * 1968-07-08 1970-04-14 Joseph T Petit Jr Optical projection system
US3740469A (en) * 1972-04-19 1973-06-19 Us Navy Reflective panoramic t.v. projection system
US4982092A (en) * 1973-07-05 1991-01-01 The United States Of America As Represented By The Secretary Of The Navy 360 Degree optical surveillance system
US3998532A (en) * 1974-04-08 1976-12-21 The United States Of America As Represented By The Secretary Of The Navy Wide angle single channel projection apparatus
US4078860A (en) * 1976-10-27 1978-03-14 Globus Ronald P Cycloramic image projection system
NL7900865A (nl) * 1979-02-02 1980-08-05 Tno Projektor voor het projekteren van een panoramabeeld en camera voor het vervaardigen van films voor zulk een projektor.
US4355328A (en) * 1981-02-23 1982-10-19 The United States Of America As Represented By The Secretary Of The Navy 360 Degree closed circuit television system
US4429957A (en) * 1981-07-30 1984-02-07 King-Bell Optics, Inc. Panoramic zoom lens assembly
JPS6020692A (ja) * 1983-07-15 1985-02-01 Hitachi Ltd 広視野装置
US4589030A (en) * 1983-07-25 1986-05-13 Kley Victor B Solid state camera
US4859046A (en) * 1988-05-20 1989-08-22 Traynor Rodney P Lane viewer mirror apparatus for vehicles
US4890314A (en) * 1988-08-26 1989-12-26 Bell Communications Research, Inc. Teleconference facility with high resolution video display
NL8802933A (nl) * 1988-11-28 1990-06-18 Heuft Qualiplus Bv Werkwijze en inrichting voor het inspekteren van de binnenwand van een lichaam.
US5040055A (en) * 1988-12-14 1991-08-13 Horizonscan Inc. Panoramic interactive system
GB8829135D0 (en) * 1988-12-14 1989-01-25 Smith Graham T Panoramic interactive system
US5023725A (en) * 1989-10-23 1991-06-11 Mccutchen David Method and apparatus for dodecahedral imaging system
JP2942344B2 (ja) * 1989-11-22 1999-08-30 旭光学工業株式会社 プロジェクター
US5194959A (en) * 1989-12-21 1993-03-16 Ricoh Company, Ltd. and Nippon Telegraph and Telephone Corporation Image forming apparatus for forming image corresponding to subject, by dividing optical image corresponding to the subject into plural adjacent optical image parts
US5245175A (en) * 1989-12-28 1993-09-14 Olympus Optical Co., Ltd. Focus detecting optical system including a plurality of focus blocks composed of an integrally molded prism member
US5130794A (en) * 1990-03-29 1992-07-14 Ritchey Kurtis J Panoramic display system
US5016109A (en) * 1990-07-02 1991-05-14 Bell South Corporation Apparatus and method for segmenting a field of view into contiguous, non-overlapping, vertical and horizontal sub-fields
DE4032387A1 (de) * 1990-10-12 1992-04-16 Liesk Ingrid Wc - kippdosimat
DE4035145A1 (de) * 1990-11-06 1992-05-07 Bio Photonics Gmbh Optisches system zur aufteilung einer reellen abbildung
US5187571A (en) * 1991-02-01 1993-02-16 Bell Communications Research, Inc. Television system for displaying multiple views of a remote location
US5179440A (en) * 1991-05-13 1993-01-12 Hughes Aircraft Company Rear projection facetted dome
JP3158484B2 (ja) * 1991-05-23 2001-04-23 日本電信電話株式会社 投射型表示装置
US5236199A (en) * 1991-06-13 1993-08-17 Thompson Jr John W Interactive media system and telecomputing method using telephone keypad signalling
US5264945A (en) * 1991-10-16 1993-11-23 Eastman Kodak Company Contact array scanners with circulating memory
JP3092276B2 (ja) * 1991-12-24 2000-09-25 ソニー株式会社 全方向受光装置
JPH0787601B2 (ja) * 1992-03-13 1995-09-20 株式会社エイ・ティ・アール通信システム研究所 立体的映像表示装置
US5264881A (en) * 1992-06-03 1993-11-23 Hughes Training, Inc. Split static surround display system
FR2692368B1 (fr) * 1992-06-12 1994-07-29 Thomson Csf Dispositif de veille panoramique infrarouge a grande portee et couverture angulaire elevee, notamment en site.
US5495576A (en) * 1993-01-11 1996-02-27 Ritchey; Kurtis J. Panoramic image based virtual reality/telepresence audio-visual system and method
JPH07322303A (ja) * 1994-05-19 1995-12-08 Pioneer Electron Corp 背面投射型プロジェクションテレビ
JPH07333557A (ja) * 1994-06-09 1995-12-22 Sony Corp 画像投影装置
US5526133A (en) * 1994-06-28 1996-06-11 Sensormatic Electronics Corporation System and method for logging and retrieving information on video cassettes in a computer controlled surveillance system
US5619255A (en) * 1994-08-19 1997-04-08 Cornell Research Foundation, Inc. Wide-screen video system
US5684626A (en) * 1994-10-25 1997-11-04 Edge Scientific Instrument Company Llc Center masking illumination system and method
US5990934A (en) * 1995-04-28 1999-11-23 Lucent Technologies, Inc. Method and system for panoramic viewing
US5745305A (en) * 1995-04-28 1998-04-28 Lucent Technologies Inc. Panoramic viewing apparatus
US5539483A (en) * 1995-06-30 1996-07-23 At&T Corp. Panoramic projection apparatus
JPH0937302A (ja) * 1995-07-18 1997-02-07 Olympus Optical Co Ltd 立体撮像装置
US6115176A (en) * 1995-11-30 2000-09-05 Lucent Technologies Inc. Spherical viewing/projection apparatus
DE19608067A1 (de) * 1996-03-02 1997-09-04 Philips Patentverwaltung Verfahren und Anordnung zum Darstellen einer Landkarte
US5708469A (en) * 1996-05-03 1998-01-13 International Business Machines Corporation Multiple view telepresence camera system using a wire cage which surroundss a plurality of movable cameras and identifies fields of view
US5760826A (en) * 1996-05-10 1998-06-02 The Trustees Of Columbia University Omnidirectional imaging apparatus

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101980080A (zh) * 2010-09-19 2011-02-23 华为终端有限公司 共光心摄像机、图像处理方法及装置
WO2012034542A1 (zh) * 2010-09-19 2012-03-22 华为终端有限公司 共光心摄像机、图像处理方法及装置
CN101980080B (zh) * 2010-09-19 2012-05-23 华为终端有限公司 共光心摄像机、图像处理方法及装置
CN103391393B (zh) * 2012-05-08 2018-03-27 索尼公司 透镜可互换照相机系统、透镜数据传输方法及记录透镜数据获取程序的计算机可读记录介质
CN103391393A (zh) * 2012-05-08 2013-11-13 索尼公司 透镜可互换照相系统、数据传输方法及透镜数据获取程序
US10165183B2 (en) 2012-10-19 2018-12-25 Qualcomm Incorporated Multi-camera system using folded optics
CN106415386A (zh) * 2014-06-20 2017-02-15 高通股份有限公司 使用无视差及倾斜伪影的折叠式光学器件的多相机系统
CN106415386B (zh) * 2014-06-20 2020-03-27 高通股份有限公司 使用无视差及倾斜伪影的折叠式光学器件的多相机系统
CN104317059A (zh) * 2014-11-14 2015-01-28 山东理工大学 幻影立体实时显示系统及其显示方法
CN106331671A (zh) * 2015-06-16 2017-01-11 纬创资通股份有限公司 立体影像显示装置、立体影像显示方法以及影像显示系统
CN106060523A (zh) * 2016-06-29 2016-10-26 北京奇虎科技有限公司 全景立体图像采集、显示方法及相应的装置
CN106060523B (zh) * 2016-06-29 2019-06-04 北京奇虎科技有限公司 全景立体图像采集、显示方法及相应的装置
CN106842801A (zh) * 2016-08-31 2017-06-13 李文松 一种vr摄影镜头设计方法

Also Published As

Publication number Publication date
JP2005006341A (ja) 2005-01-06
JP2000092521A (ja) 2000-03-31
EP0989436A3 (en) 2002-07-24
CA2277712C (en) 2002-08-13
JP3862895B2 (ja) 2006-12-27
EP0989436A2 (en) 2000-03-29
TW396292B (en) 2000-07-01
KR20000017592A (ko) 2000-03-25
CA2277712A1 (en) 2000-02-28
US6141145A (en) 2000-10-31

Similar Documents

Publication Publication Date Title
CN1247994A (zh) 立体全景观看系统
CN1247995A (zh) 小型高清晰度全景观看系统
US7429997B2 (en) System and method for spherical stereoscopic photographing
US6128143A (en) Panoramic viewing system with support stand
US7059729B2 (en) Display apparatus and image pickup apparatus
US8334895B2 (en) Image capture and processing using converging rays
US20100097444A1 (en) Camera System for Creating an Image From a Plurality of Images
TW200425737A (en) Method for creating brightness filter and virtual space creation system
CN101702076B (zh) 一种立体拍摄自动会聚跟踪方法及系统
CN1659867A (zh) 短投影距离的投影系统和方法
CN101378559A (zh) 采用摄像头组合全景拍的手机
CN101021678A (zh) 一种环幕摄像系统
CN1231071C (zh) 立体系统
CN108876712A (zh) 基于双投影变换的球形封闭座舱全景显示方法
CN105933685B (zh) 超广角微投影装置
WO2023035965A1 (zh) 成像装置、方法及设备
CN106210560A (zh) 基于流形的视频拼接方法
CN113296347A (zh) 一种裸眼显示设备
CA2310956A1 (en) Compact high resolution panoramic viewing system
JP2017103612A (ja) 光学装置及び撮像システム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication