CN101843107B - Osmu(一源多用)式立体摄影机及制作其立体视频内容的方法 - Google Patents
Osmu(一源多用)式立体摄影机及制作其立体视频内容的方法 Download PDFInfo
- Publication number
- CN101843107B CN101843107B CN2008801140863A CN200880114086A CN101843107B CN 101843107 B CN101843107 B CN 101843107B CN 2008801140863 A CN2008801140863 A CN 2008801140863A CN 200880114086 A CN200880114086 A CN 200880114086A CN 101843107 B CN101843107 B CN 101843107B
- Authority
- CN
- China
- Prior art keywords
- camera
- parallax
- image
- far point
- video camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/246—Calibration of cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/296—Synchronisation thereof; Control thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/144—Processing image signals for flicker reduction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N2013/0074—Stereoscopic image analysis
- H04N2013/0081—Depth or disparity estimation from stereoscopic image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2213/00—Details of stereoscopic systems
- H04N2213/002—Eyestrain reduction by processing stereoscopic signals or controlling stereoscopic devices
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Stereoscopic And Panoramic Photography (AREA)
- Cameras In General (AREA)
Abstract
公开一种一源多用(OSMU)式立体摄影机。立体摄影机包括其镜头与平行光轴对准的左右摄影机和右摄影机;间隔调节单元,调节摄影机之间的间隔;临界视差计算单元;摄影机间隔计算单元和图像存储单元。临界视差计算单元将立体摄影机的焦点调节到物体,并且确定图像的远点,使得基于中等尺寸显示器的远点极限视差计算最大临界视差。摄影机间隔计算单元基于所计算的临界视差计算光轴之间的间隔,并且驱动间隔调节单元。图像存储单元存储由重新调节的摄影机拍摄的图像。因此,可在不同尺寸的显示器上观看根据本发明制作的立体视频。
Description
技术领域
本发明涉及OSMU(One Source Multi Use,一源多用)式立体摄影机和制作立体视频内容的方法,更具体地,涉及可提供能够在不同尺寸的3D(三维)显示器上(例如,手机、显示板、个人计算机、数字电视、大电影屏幕等)观看但不导致眼疲劳的立体视频内容的立体摄影机和制作该立体视频内容的方法。
背景技术
可通过混合具有视差的左、右图像产生立体图像。在屏幕所显示的立体图像中,与具有零视差的图像相比,具有负视差的图像看起来从屏幕凸出,具有正视差的图像看起来在屏幕上凹入。
实际上,即使将眼焦距调节至屏幕,眼的融合过程根据图像的视差而变化。因此,当视差超过融合范围时,图像可能被感知到位于屏幕的前方或后方,从而观看者可能感到眼疲劳、头昏眼花、头疼等。而且,图像可能看起来不自然和不实际,在严重的情况下观看者可能看到重像。
立体图像的视差根据左、右摄影机之间的间隔以及镜头到物体之间的距离而变化。
对于单个3D显示平台,可通过传统立体摄影机得到立体图像。因此,为会聚距离大于10m的大电影屏幕所制作的立体图像可能不适用于会聚距离小于30cm的小尺寸显示器(例如,移动手持设备)。相反地,为小尺寸显示器制作的立体图像不能显示在具有大会聚距离的大电影屏幕上。因为已经将立体图像制作为一源一用式图像,所以限制了立体视频内容的发行,因而各种内容市场不活跃。
最近,例如液晶显示器(LCD)和等离子显示板(PDP)的平板显示器的尺寸已经变得越来越大。然而,当显示器尺寸变得极宽时,具有大的水平宽度的物体的视差不仅在普通的2D(二维)观看条件下可能超过会聚极限,在立体成像条件下也会如此。此外,视差可在立体成像条件下容易区分,因而需要考虑显示图像的尺寸。
然而,至今还不能制作适用于从2″小尺寸显示器到剧院大电影屏幕的一源多用(OSMU)式立体图像。
发明内容
技术问题
本发明提供了解决上述问题的立体摄影机和制作立体视频内容的方法。本发明提供了一种提供立体图像的立体摄影机,该立体摄影机不管观看距离或屏幕尺寸如何都能提供自然的立体效果而不会造成眼疲劳。
此外,本发明提供了通过该立体摄影机制作一源多用(OSMU)式立体视频内容的方法。
技术方案
为了实现上述目的,根据本发明示例性实施方式的立体摄影机包括左摄影机、右摄影机、间隔调节单元、临界视差计算单元、摄影机间隔计算单元、图像存储单元。左、右摄影机与平行光轴对准。间隔调节单元调节左、右摄影机之间的间隔。临界视差计算单元将立体摄影机的焦点调节到物体,并且确定其焦点已经被调节到物体的图像的远点,从而基于中等尺寸立体显示器的远点极限视差计算最大临界视差。将立体摄影机中光轴之间的间隔设为任意值。摄影机间隔计算单元基于所计算的临界视差计算平行光轴之间的间隔并且根据所计算的间隔驱动间隔调节单元。图像存储单元存储由摄影机间隔计算单元重新调节的左、右摄影机拍摄的左、右图像。
在OSMU式立体视频内容中,根据制作OSMU视频内容的方法,将其平行光轴被设为任意值的立体摄影机的焦点调节到物体。确定其焦点已经被调节到物体的图像的远点。基于中等尺寸立体显示器的远点极限视差,计算图像远点处的最大允许临界视差。基于所计算的临界视差,重新调节平行光轴之间的间隔。通过重新调节的立体摄影机拍摄物体。
中等尺寸立体显示器优选是尺寸在17″到24″范围内的桌面显示器,该桌面显示器是最普遍的显示器。中等尺寸立体显示器的远点极限视差可以约为最佳观看距离的2.79%。2.79%对应于1.6度的最大角度,直到立体图像可以为未被训练为观看立体图像的普通人会聚。
根据本发明示例性实施方式的立体摄影机包括左摄影机、右摄影机、传感器间隔调节单元、临界视差计算单元、摄影机间隔计算单元和图像存储单元。左、右摄影机对准以具有平行光轴。当左、右摄影机之间的间隔固定时,传感器间隔调节单元调节图像传感器之间的间隔。临界视差计算单元将立体摄影机的焦点调节到物体并且确定其焦点已经被调节到物体的图像的远点,从而基于中等尺寸立体显示器的远点极限视差计算最大临界视差。将立体摄影机中的光轴之间的间隔设为任意值。摄影机间隔计算单元基于所计算的临界视差计算平行光轴之间的间隔并且根据所计算的间隔驱动间隔调节单元。图像存储单元存储由摄影机间隔计算单元重新调节的左、右摄影机拍摄的左、右图像。
在OSMU式立体视频内容中,根据制作OSMU视频内容的方法的第二示例性实施方式,将图像传感器的平行光轴之间的间隔设为任意值。确定其焦点已经被调节到物体的图像的远点。基于中等尺寸立体显示器的远点极限视差,计算图像远点处的最大允许临界视差。基于所计算的临界视差,重新调节平行光轴之间的间隔。通过重新调节的立体摄影机拍摄物体。
根据本发明第三示例性实施方式的OSMU式立体摄影机包括左摄影机、右摄影机、临界视差计算单元、摄影机间隔计算单元和图像存储单元。左、右摄影机包括图像传感器和宽镜头,该图像传感器和宽镜头中的每个具有与大于本地成像面积的宽成像面积对应的视野(FOV)。将宽镜头的平行光轴固定。临界视差计算单元将具有固定间隔的立体摄影机的焦点调节到物体并且确定其焦点已经被调节到物体的图像的远点,从而基于中等尺寸立体显示器计算最大临界视差。摄影机间隔计算单元基于所计算的临界视差,计算平行光轴之间的间隔。图像存储单元存储由左、右摄影机拍摄的左、右图像。在读取操作中,图像存储单元根据由摄影机间隔计算单元计算的间隔,输出左、右显示图像。
在OSMU式立体视频内容中,根据制作OSMU视频内容的方法的第三示例性实施方式,通过被设置为具有固定间隔的立体摄影机拍摄物体。立体摄影机包括图像传感器和宽镜头,图像传感器和宽镜头中的每个具有与大于本地成像面积的宽成像面积对应的FOV。存储所拍摄的、具有宽成像面积的左、右图像。确定其焦点已经被调节到物体的图像的远点。基于中等尺寸立体显示器的远点极限视差,计算图像远点处的最大允许临界视差。基于所计算的临界视差,根据所计算的间隔,重新设置来自所存储的宽成像面积的显示图像读取地址。根据重新设置的读取地址,读取左、右显示图像。
根据第四示例性实施方式的OSMU式立体摄影机包括左摄影机、右摄影机、临界视差计算单元、摄影机间隔计算单元和图像存储单元。左、右摄影机包括图像传感器和宽镜头,该图像传感器和宽镜头中的每个具有与大于本地成像面积的宽成像面积对应的FOV。宽成像面积大于显示图像尺寸,宽镜头的光轴被设置为具有固定间隔。临界视差计算单元将被设置为具有固定间隔的立体摄影机的焦点调节到物体,并且确定其焦点已经被调节到物体的图像的远点。因此,临界视差计算单元基于中等尺寸立体显示器的远点极限视差,计算最大临界视差。摄影机间隔计算单元基于所计算的临界视差,计算平行光轴之间的间隔。图像存储单元写入由左、右摄影机获取的宽面积的左、右图像。在读取操作中,图像存储单元根据由摄影机间隔单元所计算的间隔值,输出左、右显示图像。
在OSMU式立体视频内容中,根据制作OSMU视频内容的第四示例性实施方式,由被设置为在摄影机之间具有固定间隔的立体摄影机拍摄物体。立体摄影机包括图像传感器和宽镜头,该图像传感器和宽镜头中的每个具有大于本地成像面积的宽成像面积对应的FOV。确定其焦点已经被调节到物体的图像的远点,并且基于中等尺寸立体显示器的远点极限视差计算图像远点处的最大临界视差,从而基于所计算的临界视差计算摄影机之间的间隔。根据所计算的、摄影机之间的间隔,存储宽面积图像中显示器大小的左、右图像。
根据第五示例性实施方式的OSMU式立体摄影机包括左摄影机、右摄影机、临界视差计算单元、摄影机间隔计算单元和图像存储单元。左、右摄影机包括图像传感器和宽镜头,该图像传感器和宽镜头中的每个具有与大于本地成像面积的宽成像面积对应的FOV。宽成像面积大于显示图像尺寸,并且宽镜头的光轴被固定为相互平行。临界视差计算单元将被设置为具有固定间隔的立体摄影机的焦点调节到物体,并且确定其焦点已经被调节到物体的图像的远点。因此,临界视差计算单元基于中等尺寸立体显示器的远点极限视差,计算最大临界视差。摄影机间隔计算单元基于所计算的临界视差,计算平行光轴之间的间隔。图像存储单元存储由左、右摄影机获取的宽面积的左、右图像。左、右摄影机的图像传感器根据所计算的、摄影机之间的间隔,仅输出具有显示器大小的像素数据。
在OSMU式立体视频内容中,根据制作OSMU视频内容的第五示例性实施方式,通过被设置为摄影机之间具有固定间隔的立体摄影机拍摄物体。立体摄影机包括图像传感器和宽镜头,该图像传感器和宽镜头中的每个具有大于本地成像面积的宽成像面积对应的FOV。确定其焦点已经被调节到所拍摄的物体的图像的远点。基于中等尺寸立体显示器的远点极限视差,计算最大允许临界视差。基于所计算的临界视差,计算摄影机之间的间隔。从图像传感器仅输出具有显示器大小的像素数据,并且存储该像素数据。
有益效果
桌面显示器可以是从小尺寸的移动手持设备到大电影屏幕中的最普遍显示器。如上所述,根据本发明的立体摄影机基于桌面显示器的远点视差,重新调节立体摄影机的摄影机间隔。然后,立体摄影机可通过拍摄立体图像来制作OSMU式立体视频内容。
附图说明
图1是根据本发明的一个示例性实施方式的一源多用(OSMU)式立体摄影机的框图;
图2是描述了立体显示器的远点极限视差与立体摄影机的临界视差之间的关系的图表;
图3图示了左、右摄影机与物体之间的光学几何关系;
图4图示了在摄影机之间的间隔处于初始状态情况下,通过图像传感器拍摄的左、右图像以及混合的立体图像的几何结构;
图5图示了在摄影机之间的间隔被重新调节的情况下,通过图像传感器拍摄的左、右图像以及混合的立体图像的几何结构;
图6是图示了根据本发明的另一示例性实施方式的OSMU式立体摄影机的框图;
图7是图示了根据修改的示例性实施方式的OSMU式立体摄影机的框图;
图8是图示了OSMU式立体摄影机的又一示例性实施方式的框图;
图9是用于描述图8的一个实施例的图表;
图10是图示了OSMU式立体摄影机的第四示例性实施方式的框图;
图11是描述了图10中的地址生成单元的地址生成操作的图表;
图12是图示了OSMU式立体摄影机的又一示例性实施方式的框图;
图13是描述了图12的图像传感器的像素数据输出操作的图表。
在下文中,参照所附附图更全面地描述根据本发明的实施方式。提供这些实施方式是为了使得本公开详尽和完整,并且将本发明的范围完全传达给本领域技术人员。
具体实施方式
图1是图示了根据本发明的第一示例性实施方式的一源多用(OSMU)式立体摄影机的框图。参照图1,立体摄影机100可包括摄影机单元110、临界视差计算单元120、摄影机间隔计算单元130、图像存储单元140和图像混合单元150。
摄影机单元110可包括左摄影机112、右摄影机114、间隔调节单元116。左、右摄影机112和114在间隔调节单元116上彼此平行地对准。左、右摄影机112和114在垂直于光轴的方向(即,左、右方向)上移动,从而可以改变左、右摄影机112和114之间的间隔。左摄影机112包括设置在共同光轴上的镜头LL和图像传感器SL。右摄影机112可包括设置在共同光轴上的镜头LR和图像传感器SR。图像传感器SL和SR可以是电荷耦合器件(CCD)图像传感器或互补金属氧化物半导体(CMOS)图像传感器。
临界视差计算单元120将立体摄影机的焦点调节到物体,该立体摄影机的平行光轴之间的间隔被设为任意值。临界视差计算单元120确定图像的远点并且基于中等尺寸立体显示器的远点极限视差计算临界视差。
图2是图示了立体显示器的远点极限视差和立体摄影机的临界视差的关系的图表。
参照图2,立体显示器的屏幕的远点极限视差PD基于会聚距离Zv的tan(1.6)值。从未被训练观看立体图像的普通人可能通常感知到视差最大角度为1.6度的图像,该角度是从实际屏幕获得的视网膜像差的最大值的一半。因而,当将屏幕视差限制为视网膜像差的一半时,可减少眼疲劳症状和头痛。
表1表示根据会聚距离的极限视差。
表1立体显示器的远点极限视差
为了在所有尺寸的立体显示器中观看一源立体图像内容,远点极限视差基于中等尺寸显示器,例如具有在17″到24″范围内的尺寸的桌面显示器。
根据如表2所示的显示器尺寸,中等尺寸的桌面显示器可具有最短的会聚距离。因此,中等尺寸的桌面显示器可因最大的视野(FOV)而处于最不舒适的条件下。
表2.根据显示器尺寸的FOV
水平宽度 | 水平宽度/2 | 会聚距离 | a/b | θ/2 | FOV |
44.16(2.2″) | 22.08 | 300 | 0.0736 | 4.21 | 8.42 |
88(4″) | 44 | 300 | 0.1466 | 8.34 | 16.68 |
162(8″) | 81 | 300 | 0.2700 | 15.11 | 30.22 |
376(19″) | 188 | 460 | 0.4087 | 22.23 | 44.46 |
518.4(24″) | 259.2 | 500 | 0.5184 | 27.4 | 54.8 |
2220(100″) | 1110 | 3000 | 0.37 | 20.3 | 40.3 |
6640(300″) | 3320 | 10000 | 0.332 | 18.37 | 36.74 |
参照表2,当使用19″显示器时,标准的会聚距离是46cm。远点极限视差(PD)可从等式1推得。
[等式1]
PD=0.46m×0.0279=0.0128m
当标准的会聚距离为50cm时,在24″显示器中推得的远点极限视差为0.0140。
可允许的临界视差(即,在不舒适显示器观看条件下的临界视差)可从等式2推得。
[等式2]
PS=PD×(WS/WD)
在等式2中,PS表示在图像传感器的远点处的临界视差,WS表示图像传感器的水平宽度,PD表示中等尺寸显示器的远点极限视差,以及WD表示显示器的水平宽度。
例如,当19″显示器的水平宽度WD为0.378m并且2/3″CCD图像传感器的水平宽度WS为0.0088m时,通过等式2得到在图像传感器的远点处的临界视差为0.0128m×(0.0088m/0.378m)=0.298mm。
摄影机间隔计算单元130基于所计算出的临界视差PS计算平行光轴之间的间隔,并且根据所计算的间隔驱动间隔调节单元160以调节左、右摄影机之间的间隔。
[等式3]
CC=PS/ZS(1/Z0-1/ZF)
根据等式3,不舒适观看条件下的临界视差PS可被表征以调节摄影机间隔,使得OSMU条件可得到满足。
图3是图示了在摄影机单元110中的左、右摄影机112和114与物体之间的光学几何关系的图表。
图3中的每个符号表示:
AXL:左镜头的光轴
AXR:右镜头的光轴
Z0:镜头中心与会聚点Oz之间的直线距离(零视差距离)
ZF:镜头中心与远点之间的直线距离(临界视差距离)
ZS:镜头中心与图像传感器SL和SR之间的直线距离(图像距离)
f:镜头的焦距
CC:左、右镜头LL和LR的中心之间的距离(左、右摄影机之间的间隔)
CZ:左、右图像传感器SL和SR的中心之间的距离(左、右零视差图像的中心之间的间隔)
CF:由图像传感器SL和SR拍摄的远点左、右图像的中心之间的距离(左、右远点极限视差图像的中心之间的间隔)
WS:图像传感器SL和SR之间的水平宽度
PL:左视差
PR:右视差
在相似三角形A1和A2中,通过等式3推得Z0:C0/2=ZS:(CZ-C0)/2,因而等式4表示如下。
[等式4]
CZ=(ZS/Z0)CC+CC
通过相同的方法,在相似三角形A3和A4中推得ZF:CC/2=ZS:(CF-CC)/2,因而等式5表示如下。
[等式5]
CF=(ZS/ZF)CC+CC
与远点对应的左、右图像之间的视差由等式6表示。
[等式6]
PF=PL+PR
=CZ-CF
=(ZS/Z0)CC+CC-{(ZS/ZF)CC+CC}
=ZSCC(1/Z0-1/ZF)
因此,等式3可通过求解等式6得到。
图像存储单元140存储由立体摄影机拍摄的左、右图像,该立体摄影机的左、右摄影机之间的间隔基于等式3进行重新调节。
图像混合单元150分别将存储在图像存储单元140中的左、右图像左移和右移,从而使零视差的图像通过重叠而会聚。然后,图像混合单元150将重叠的图像与具有视差的立体图像混合。经混合的立体图像被显示在立体显示器上。
图4图示了在摄影机之间的间隔处于初始状态的情况下,由图像传感器拍摄的左、右图像和混合的立体图像的几何结构。图5图示了根据本发明在摄影机之间的间隔被重新调节的情况下,由图像传感器拍摄的左、右图像以及混合的立体图像的几何结构。
参照图4和5,将摄影机之间的间隔从C0重新调节到CC,使得初始远点屏幕视差SPO变成与立体显示器的临界视差对应的临界屏幕视差SPC。因此,将左、右远点图像FL和FR的视差从初始远点屏幕视差PSO重新调节到临界屏幕视差PSC。
图6是图示了根据本发明的第二示例性实施方式的OSMU式立体摄影机的框图。与根据本发明的第一示例性实施方式的OSMU式立体摄影机相比,根据本发明的第二示例性实施方式的OSMU式立体摄影机独立调节摄影机单元的镜头与图像传感器之间的间隔。
参照图6,立体摄影机200可包括摄影机单元210、临界视差计算单元220、摄影机间隔计算单元230、图像存储单元240和图像混合单元250。
摄影机单元210可包括左摄影机212、右摄影机214、摄影机间隔调节单元216和传感器间隔调节单元218。左、右摄影机212和214在摄影机间隔调节单元216上彼此平行地对准。左、右摄影机212和214可在与光轴垂直的方向(即,左、右方向)上移动,从而可调节左、右摄影机212和214之间的间隔。左摄影机212可包括图像传感器SL,图像传感器SL可在与镜头LL的光轴垂直的方向上移动。右摄影机214可包括图像传感器SR,图像传感器SR可在与镜头LR的光轴垂直的方向上移动。左、右图像传感器SL和SR在传感器间隔调节单元上彼此平行地对准,使得左、右图像传感器SL和SR之间的间隔相对于彼此被调节。
临界视差计算单元220将立体摄影机的焦点调节到物体并且确定其焦点已经被调节到物体的图像的远点,以基于中等尺寸立体显示器的远点极限视差计算图像远点处的最大允许的临界视差。图像传感器SL和SR之间的间隔被设为任意值。
摄影机间隔计算单元230基于所计算的临界视差计算图像传感器SL和SR之间的间隔,并且响应于所计算的间隔驱动传感器间隔调节单元218。摄影机间隔计算单元230可通过驱动摄影机间隔调节单元216调节镜头之间的间隔。
图像存储单元240分别存储由立体摄影机拍摄的左、右图像,该立体摄影机的间隔基于等式3被调节。
图像混合单元250将存储在图像存储单元240中的左、右图像左移和右移,使得零视差的图像通过重叠而会聚。图像混合单元250将重叠的图像和具有视差的立体图像混合。经混合的立体图像显示在立体显示器上。
在第二示例性实施方式中,与平行光轴对准的左、右图像传感器SL和SR之间的间隔被设为任意值。将包括左、右图像传感器SL和SR的立体摄影机的焦点调节到物体,从而确定其焦点已经被调节到物体的图像的远点。然后,基于中等尺寸立体显示器的远点极限视差,计算图像远点处的最大允许的临界视差。基于所计算的临界视差,重新调节左、右图像传感器SL和SR之间的间隔。具有被重新调节的图像传感器的立体摄影机拍摄物体,从而可制作OSMU式立体视频内容。
图7是图示了根据修改的示例性实施方式的OSMU式立体摄影机的框图。与第二示例性实施方式相比,参照图7,图像传感器被固定,且镜头在左、右方向移动。
参照图7,立体摄影机300可包括摄影机单元310、临界视差计算单元320、摄影机间隔计算单元330、图像存储单元340和图像混合单元350。
摄影机单元310可包括左摄影机312、右摄影机314、摄影机间隔调节单元316和镜头间隔调节单元318。左、右摄影机312和314在摄影机间隔调节单元316上平行于彼此对准,并且能够在垂直于光轴的方向(即,左、右方向)移动,从而可调节左、右摄影机312和314之间的间隔。左摄影机312可包括镜头LL,镜头LL可在与图像传感器SL的光轴垂直的方向上左右移动。右摄影机312可包括镜头LR,镜头LR可在与图像传感器SR的光轴垂直的方向上左右移动。左、右镜头LL和LR在镜头间隔调节单元318上彼此平行对准,使得左、右镜头LL和LR之间的间隔可相对于彼此被调节。
临界视差计算单元320将立体摄影机的焦点调节到物体,该立体摄影机的镜头LL和LR已经被设为任意值。临界视差计算单元320确定其焦点已经被调节到物体的图像的远点。因此,临界视差计算单元320可基于中等尺寸立体显示器的远点极限视差,计算图像远点处的最大允许临界视差。
摄影机间隔计算单元330基于所计算的临界视差计算镜头LL和LR之间的间隔,并且根据所计算的间隔驱动镜头间隔调节单元318。摄影机间隔计算单元330可通过驱动摄影机间隔调节单元316,来调节传感器SL和SR之间的间隔。
图像存储单元340存储由立体摄影机拍摄的左、右图像,该立体摄影机的摄像机之间的间隔已经基于等式3进行了重新调节。
图像混合单元350将存储在图像存储单元340内的左图像和右图像分别左右位移,使得零视差的图像通过重叠而会聚。然后,图像混合单元350将所重叠的图像和具有视差的立体图像混合。经混合的立体图像被显示在立体显示器上。
在修改的示例性实施方式中,将与平行光轴对准的左镜头LL和右镜头LR之间的间隔设为任意值。包括左镜头LL和右镜头LR的立体摄影机将焦点调节到物体,并且确定其焦点已经被调节到物体的图像的远点。然后,基于中等尺寸立体显示器的远点极限视差,计算图像远点处的最大允许临界视差。基于所计算的临界视差,重新调节左镜头LL和右镜头LR之间的间隔。具有重新调节的镜头的立体摄影机拍摄物体,从而可制作OSMU式立体视差内容。
图8是图示OSMU式立体摄影机的第三示例性实施方式的框图。
立体摄影机400可包括摄影机单元410、临界视差计算单元420、摄影机间隔计算单元430、图像存储单元440和图像混合单元450。
摄影机单元410可包括左摄影机412和右摄影机414。左摄影机412和右摄影机414彼此平行对准。左摄影机412和右摄影机414分别包括左、右宽传感器WSL和WSR以及左、右宽镜头WLL和WLR。左、右宽传感器WSL和WSR以及左、右宽镜头WLL和WLR的尺寸大于上述左、右图像传感器SL和SR以及镜头LL和LR,使得左、右宽图像传感器WSL和WSR以及左、右宽镜头WLL和WLR的尺寸可包括左、右图像传感器SL和SR以及镜头LL和LR的最大允许移动距离。参照图9,左、右宽图像传感器WSL和WSR可具有对应于宽成像面积WW×HW的宽FOV。宽成像面积WW×HW大于显示器成像面积WO×HO。显示器成像面积WO×HO可对应于本地成像面积(native imaging area)。
临界视差计算单元420调节在左摄影机与右摄影机之间具有固定间隔的立体摄影机的焦点,并且确定其焦点已被调节至物体的图像的远点。临界视差计算单元420基于中等尺寸立体显示器的远点极限视差,计算图像远点处的最大允许临界视差。
摄影机间隔计算单元430基于所计算的临界视差,计算虚拟摄影机之间的间隔。
图像存储单元440可包括地址生成单元442、左图像存储单元444和右图像存储单元446。左、右图像存储单元444和446可具有大存储容量,使得左、右图像存储单元444和446可存储与宽图像传感器WSL和WSR的尺寸对应的宽成像面积WW×HW。地址生成单元442生成写地址,以分别将由立体摄影机拍摄的左、右图像作为宽成像面积WW×HW的尺寸存储在左、右图像存储单元444和446中,作为最初拍摄的尺寸。当地址生成单元442从左、右图像存储单元444和446读取所存储的图像数据时,地址生成单元442通过根据由摄影机间距计算单元430计算的间距尽可能地左右位移到重新调节的、摄影机之间的间距CC,来生成左、右图像读取地址(L(i-(CC-CO)/2)j、L(i+WO-(CC-CO)/2)(j+HO))和(R(i+(CC-CO)/2)j,R(i+WO+(CC-CO)/2)(j+HO))。
图像混合单元450将从图形存储单元430读取的左、右图像分别左、右位移,使得左、右图像通过重叠而会聚以得到零视差。将所重叠的图像与具有视差的立体图像混合,并将经混合的立体图形显示在立体显示器上。
图10是图示了OSMU式立体摄影机的第四示例性实施方式的框图,图11是描述图10中的地址生成单元的地址生成操作的图表。
与第三实施方式相比,图10的第四示例性实施方式不重新调节读地址,而是根据摄影机之间的间距重新调节写地址。第四实施方式的立体摄影机500可包括摄影机单元510、临界视差计算单元520、摄影机间隔计算单元530、图像存储单元540和图像混合单元550。
摄影机单元510可包括左摄影机512和右摄影机514。左摄影机512和右摄影机514在固定的位置处彼此平行对准。左摄影机512和右摄影机514分别包括左宽图像传感器WSL和右宽图像传感器WSR以及左宽镜头WLL和右宽镜头WLR。左、右宽图像传感器WSL和WSR以及左、右宽镜头WLL和WLR的尺寸大于上述第一和第二示例性实施方式中的左、右图像传感器SL和SR以及镜头LL和LR,以使得左、右宽图像传感器WSL和WSR以及左、右宽镜头WLL和WLR可包括左、右图像传感器SL和SR以及镜头LL和LR的最大允许移动距离。参照图11,左、右宽图像传感器WSL和WSR可具有与宽成像面积Ww×Hw对应的宽FOV,该宽成像面积Ww×Hw大于显示器成像面积Wo×Ho。
临界视差计算单元520将包含固定摄影机的立体摄影机的焦点调节到物体,并且确定其焦点已经被调节到物体的图像的远点。临界视差计算单元520基于中等尺寸立体显示器的远点极限视差,计算图像远点处的最大允许临界视差。
摄影机间隔计算单元530基于所计算的临界视差,计算虚拟摄影机之间的间隔。
图像存储单元540可包括地址生成单元542、左图像存储单元544、和右图像存储单元546。左、右图像存储单元544和546可包括大存储容量,例如,可存储与宽图像传感器WSL和WSR的尺寸对应的宽成像面积WW×HW。
地址生成单元542接收来自左、右图像传感器的左、右同步信号SyncL(L_SyncL,FJSyncL)和SyncR(L_SyncR,F_SyncR)。地址生成单元542根据参照图11由摄影机间隔计算单元530计算的、摄影机之间重新调节的间隔CC,生成X地址有效信号X_ValidL和X_ValidR以及Y地址有效信号Y_ValidL和Y_ValidR。地址生成单元542根据所生成的X地址有效信号X_ValidL和X_ValidR以及Y地址有效信号Y_ValidL和Y_ValidR,生成存储在图像存储单元540内的Y地址Y_AddrL和Y_AddrR以及X地址X_AddrL和X_AddrR的有效区域(阴影区域)内的信号,作为有效地址。因此,左、右图像存储单元544和546将像素数据存储在由有限区域(图11的阴影区域)表示的有效地址内。因为在读取操作内读取限制在阴影区域内的存储数据,所以具有阴影区域大小的左、右图像被读取并且提供给图像混合单元550。
图像混合单元550将从图像存储单元540读取的左、右图像分别移位,并且通过重叠相对于彼此调节零视差,使得所重叠的图像与具有视差的立体图像混合。经混合的立体图像显示在立体显示器上。
图12是图示了OSMU式立体摄影机的第五示例性实施方式的框图,图13是描述图12的图像传感器的像素数据的输出操作的图表。
与其他示例性实施方式相比,参照图12的第五示例性实施方式根据所计算的摄影机之间的间隔,重新调节从具有与宽成像面积Ww×Hw对应的FOV的图像传感器WSL和WSR输出的像素数据。参照图12,立体摄影机600可包括摄影机单元610、临界视差计算单元620、摄影机间隔计算单元630、图像存储单元640和图像混合单元650。
摄影机610可包括左摄影机612和右摄影机614。左、右摄影机612和614在固定的位置彼此平行对准。左、右摄影机612和614包括左、右宽图像传感器WSL和WSR以及左、右宽镜头WLL和WLR。
左、右宽图像传感器WSL和WSR以及左、右宽镜头WLL和WLR通过包括左、右图像传感器SL和SR以及镜头LL和LR的最大允许移动距离,大于上述第一和第二示例性实施方式的左、右图像传感器SL和SR以及镜头LL和LR。参照图13,左、右宽图像传感器WSL和WSR可具有与大于显示器成像面积Wo×Ho的宽成像面积Ww×Hw对应的FOV。
宽图像传感器WSL和WSR根据如图13所示的行有效信号L_ValidL和L_ValidR以及帧有效信号F_ValidL和F_ValidR,输出宽成像面积Ww×Hw大小的像素数据。
第五示例性实施方式的宽图像传感器WSL和WSR根据图13所示调节后的行有效信号CL_ValidL和CL_ValidR以及调节后的帧有效信号CF_ValidL和CF_ValidR,输出显示器成像面积Wo×Ho大小的像素数据。调节后的行有效信号CL_ValidL和CL_ValidR以及调节后的帧有效信号CF_ValidL和CF_ValidR是根据摄影机间隔计算单元630计算的间隔而生成。因此,在宽图像传感器WSL和WSR中,通过调节后的行有效信号CL_ValidL和CL_ValidR调节像素时钟信号PC的有效部分,使得仅将与第一行的有效部分对应的像素数据输出为有效行数据。通过调节后的帧有效信号CF_ValidL和CF_ValidR对调节后的行有效信号CL_ValidL和CL_ValidR的有效部分进行调节,从而仅将与第一帧的有效部分对应的行数据输出为有效帧数据。
临界视差计算单元620将摄影机之间具有固定间隔的立体摄影机调节到物体,并且确定其焦点已经被调节到物体的图像的远点。临界视差计算单元620基于中等尺寸立体显示器的远点极限视差,计算图像远点处的最大允许临界视差。
摄影机间隔计算单元630基于所计算的临界视差,计算虚拟摄影机之间的间隔。
图像存储单元640接收从图像传感器输出的左、右图像,并且存储所接收的左、右图像。
图像混合单元650将存储在图像存储单元640中的左、右图像分别位移,以通过重叠左、右图像来会聚每个图像的零视差。将重叠的图像与具有视差的立体图像混合。将经混合的立体图像显示在立体显示器上。
工业适用性
由本发明的示例性实施方式得到的立体图像可在各种显示器尺寸(例如,移动电话、桌面显示器、电视、大屏幕投影电视机和电影屏幕)上观看,从而可扩大立体视频内容市场。
已经描述了本发明的示例性实施方式及其优点,注意在不背离所附权利要求所限定的本发明精神和范围的前提下,可实现各种变化、替换和改变。
Claims (28)
1.一种一源多用OSMU式立体摄影机,包括:
左摄影机和右摄影机,与平行光轴对准;
间隔调节单元,被配置为调节所述左摄影机与所述右摄影机之间的间隔;
临界视差计算单元,被配置为将立体摄影机的焦点调节到物体并且确定其焦点已经被调节到所述物体的图像的远点,从而在所述光轴之间的间隔被设为任意值的情况下,基于中等尺寸立体显示器的远点极限视差计算最大临界视差;
摄影机间隔计算单元,被配置为基于所计算的临界视差计算所述平行光轴之间的间隔,并且根据所计算的间隔驱动所述间隔调节单元;以及
图像存储单元,被配置为存储由所述摄影机间隔计算单元重新调节的左摄影机和右摄影机拍摄的左图像和右图像,
其中,所述临界视差由下列等式表示:
PS=PD×(WS/WD)
其中,
Ps表示在图像传感器的远点处的临界视差,
Ws表示所述图像传感器的水平宽度;
PD表示所述中等尺寸立体显示器的远点极限视差;以及
WD表示所述立体显示器的水平宽度。
2.如权利要求1所述的OSMU式立体摄影机,其中,所述中等尺寸立体显示器是尺寸在17″到24″范围内的桌面显示器。
3.如权利要求1所述的OSMU式立体摄影机,其中,所述中等尺寸立体显示器的远点极限视差为最佳会聚距离的2.79%。
4.如权利要求1所述的OSMU式立体摄影机,其中,重新调节的、所述平行光轴之间的间隔CC由下式表示:
CC=PS/ZS(l/Z0-l/ZF)
其中,
Zs表示所述立体摄影机的镜头的中心与两个图像传感器连线之间的垂直距离;
Z0表示所述镜头的中心与会聚点之间的直线距离;以及
ZF表示所述镜头的中心与所述远点之间的直线距离。
5.一种制作一源多用OSMU式立体视频内容的方法,包括:
将立体摄影机的焦点调节到物体,所述立体摄影机的平行光轴之间的间隔被设为任意值;
确定其焦点已经被调节到所述物体的图像的远点;
基于中等尺寸立体显示器的远点极限视差,计算所述图像的远点处的最大允许临界视差;
基于所计算的临界视差重新调节所述平行光轴之间的间隔;以及
通过重新调节的立体摄影机拍摄所述物体,
其中,所述临界视差由下式表示:
PS=PD×(WS/WD)
其中,
PS表示在图像传感器的远点处的临界视差;
WS表示所述图像传感器的水平宽度;
PD表示所述中等尺寸立体显示器的远点极限视差;以及
WD表示所述立体显示器的水平宽度。
6.如权利要求5所述的方法,其中,所述中等尺寸立体显示器为桌面显示器。
7.如权利要求6所述的方法,其中,所述桌面显示器具有在17″到24″范围内的尺寸。
8.如权利要求5所述的方法,其中,所述中等尺寸立体显示器的远点极限视差为所述立体显示器的最佳观看距离的2.79%。
9.如权利要求5所述的方法,其中,重新调节的、所述平行光轴之间的间隔CC由下式表示:
CC=PS/ZS(l/Z0-l/ZF)
其中,
Zs表示所述立体摄影机的镜头的中心与两个图像传感器连线之间的垂直距离;
Z0表示所述镜头的中心与会聚点之间的直线距离;以及
ZF表示所述镜头的中心与所述远点之间的直线距离。
10.如权利要求5所述的方法,进一步包括:
通过将所述立体摄影机拍摄的左图像和右图像混合,生成单个立体图像。
11.一种一源多用OSMU式立体摄影机,包括:
左摄影机和右摄影机,与平行光轴对准;
传感器间隔调节单元,被配置为在所述左摄影机与所述右摄影机之间的间隔固定的情况下,调节图像传感器之间的间隔;
临界视差计算单元,被配置为将立体摄影机的焦点调节到物体并且确定其焦点已经被调节到所述物体的图像的远点,从而在所述图像传感器之间的间隔被设为任意值的情况下,基于中等尺寸立体显示器的远点极限视差计算最大允许临界视差;
摄影机间隔计算单元,被配置为基于所计算的临界视差计算所述图像传感器之间的间隔,并且根据所计算的间隔驱动所述传感器间隔调节单元;以及
图像存储单元,被配置为存储由通过所述摄影机间隔计算单元重新调节的左摄影机和右摄影机拍摄的左图像和右图像,
其中,所述临界视差由下式表示:
PS=PD×(WS/WD)
其中,
PS表示在所述图像传感器的远点处的临界视差;
WS表示所述图像传感器的水平宽度;
PD表示所述中等尺寸立体显示器的远点极限视差;以及
WD表示所述立体显示器的水平宽度。
12.如权利要求11所述的OSMU式立体摄影机,其中,所述中等尺寸立体显示器具有17″到24″范围内的尺寸。
13.如权利要求11所述的OSMU式立体摄影机,其中,所述中等尺寸立体显示器的远点临界视差为最佳观看距离的2.79%。
14.如权利要求11所述的OSMU式立体摄影机,其中,重新调节的、所述平行光轴之间的间隔CC由下式表示:
CC=PS/ZS(l/Z0-l/ZF)
其中,
Zs表示所述立体摄影机的镜头的中心与两个图像传感器连线之间的垂直距离;
Z0表示所述镜头的中心与会聚点之间的直线距离;以及
ZF表示所述镜头的中心与所述远点之间的直线距离。
15.一种制作一源多用OSMU式立体视频内容的方法,包括:
在图像传感器的平行光轴之间的间隔被设为任意值的情况下,将立体摄影机的焦点调节到物体;
确定其焦点已经被调节到所述物体的图像的远点;
基于中等尺寸立体显示器的远点极限视差,计算所述图像的远点处的最大允许临界视差;
基于所计算的临界视差,重新调节左图像传感器和右图像传感器之间的间隔;以及
通过重新调节的立体摄影机拍摄所述物体,
其中,所述临界视差由下式表示:
PS=PD×(WS/WD)
其中,
PS表示在所述图像传感器的远点处的临界视差;
WS表示所述图像传感器的水平宽度;
PD表示所述中等尺寸立体显示器的远点极限视差;以及
WD表示所述立体显示器的水平宽度。
16.如权利要求15所述的方法,其中,所述中等尺寸立体显示器为桌面显示器。
17.如权利要求16所述的方法,其中,所述桌面显示器具有17″到24″范围内的尺寸。
18.如权利要求15所述的方法,其中,所述中等尺寸立体显示器的远点临界视差为最佳观看距离的2.79%。
19.如权利要求15所述的方法,其中,重新调节的、所述平行光轴之间的间隔CC由下式表示:
CC=PS/ZS(l/Z0-l/ZF)
其中,
Zs表示所述立体摄影机的镜头的中心与两个图像传感器连线之间的垂直距离;
Z0表示所述镜头的中心与会聚点之间的直线距离;以及
ZF表示所述镜头的中心与所述远点之间的直线距离。
20.如权利要求15所述的方法,进一步包括:
通过将由所述立体摄影机拍摄的左图像和右图像混合,生成单个立体图像。
21.一种一源多用OSMU式立体摄影机,包括:
左摄影机和右摄影机,与水平光轴对准;
镜头间隔调节单元,被配置为在摄影机的图像传感器之间的间隔固定的情况下,调节左镜头和右镜头之间的间隔;
临界视差计算单元,被配置为将立体摄影机的焦点调节到物体并且确定其焦点已经被调节到所述物体的图像的远点,从而在所述立体摄影机中的镜头之间的间隔被设为任意值的情况下,基于中等尺寸立体显示器的远点极限视差计算最大临界视差;
摄影机间隔计算单元,被配置为基于所计算的临界视差计算所述镜头之间的间隔,并且根据所计算的间隔驱动所述镜头间隔调节单元;以及
图像存储单元,被配置为存储由左摄影机和右摄影机拍摄的左图像和右图像,所述左摄影机和所述右摄影机的镜头之间的间隔被所述摄影机间隔计算单元重新调节,
其中,所述临界视差由下列等式表示:
PS=PD×(WS/WD)
其中,
Ps表示在所述图像传感器的远点处的临界视差,
Ws表示所述图像传感器的水平宽度;
PD表示所述中等尺寸立体显示器的远点极限视差;以及
WD表示所述立体显示器的水平宽度。
22.一种制作一源多用OSMU式立体视频内容的方法,包括:
在具有平行光轴的左镜头和右镜头之间的间隔被设为任意值的情况下,将立体摄影机的焦点调节到物体;
确定其焦点已经被调节到所述物体的图像的远点;
基于中等尺寸立体显示器的远点极限视差,计算所述图像的远点处的最大允许临界视差;
基于所计算的临界视差,重新调节所述左镜头和所述右镜头之间的间隔;以及
通过重新调节的立体摄影机拍摄所述物体,
其中,所述临界视差由下式表示:
PS=PD×(WS/WD)
其中,
Ps表示在图像传感器的远点处的临界视差,
WS表示所述图像传感器的水平宽度;
PD表示所述中等尺寸立体显示器的远点极限视差;以及
WD表示所述立体显示器的水平宽度。
23.一种一源多用OSMU式立体摄影机,包括:
左摄影机和右摄影机,包括图像传感器和镜头,所述镜头的平行光轴固定,所述图像传感器和镜头的视野所对应的成像面积均大于本地成像面积;
临界视差计算单元,被配置为将立体摄影机的焦点调节到物体并且确定其焦点已经被调节到所述物体的图像的远点,从而在所述摄影机的间隔固定的条件下,基于中等尺寸立体显示器的远点极限视差计算最大临界视差;
摄影机间隔计算单元,被配置为基于所计算的临界视差,计算所述平行光轴之间的间隔;以及
图像存储单元,被配置为存储由左摄影机和右摄影机拍摄的、左图像和右图像,并且在读取操作中根据由所述摄影机间隔计算单元计算的间隔输出左显示图像和右显示图像,
其中,所述临界视差由下列等式表示:
PS=PD×(WS/WD)
其中,
Ps表示在所述图像传感器的远点处的临界视差,
Ws表示所述图像传感器的水平宽度;
PD表示所述中等尺寸立体显示器的远点极限视差;以及
WD表示所述立体显示器的水平宽度。
24.一种制作一源多用OSMU式立体视频内容的方法,包括:
通过立体摄影机拍摄物体,所述立体摄影机包括图像传感器和镜头,所述镜头的视野对应的成像面积大于本地成像面积,所述立体摄影机被设为具有固定的间隔;
存储所拍摄的左图像和右图像,所述左图像和所述右图像的成像面积大于本地成像面积;
确定其焦点已经被调节到所述物体的图像的远点;
基于中等尺寸立体显示器的远点极限视差,计算所述图像的远点处的最大允许临界视差;
基于所计算的临界视差,根据所计算的间隔,重新设置所存储的成像面积图像中的期望显示图像的显示图像读取地址;以及
根据重新设置的读取地址,读取左显示图像和右显示图像,
其中,所述临界视差由下式表示:
PS=PD×(WS/WD)
其中,
Ps表示在所述图像传感器的远点处的临界视差,
WS表示所述图像传感器的水平宽度;
PD表示所述中等尺寸立体显示器的远点极限视差;以及
WD表示所述立体显示器的水平宽度。
25.一种一源多用OSMU式立体摄影机,包括:
左摄影机和右摄影机,包括图像传感器和镜头,所述镜头的光轴被固定为具有平行光轴,所述图像传感器和所述镜头的视野对应的成像面积均大于本地成像面积;
临界视差计算单元,被配置为将所述立体摄影机的焦点调节到物体并且确定其焦点已经被调节到所述物体的图像的远点,从而在所述平行光轴固定的情况下,基于中等尺寸立体显示器的远点极限视差,计算所述图像的远点处的最大允许临界视差;
摄影机间隔计算单元,被配置为基于所计算的临界视差计算所述平行光轴之间的间隔;以及
图像存储单元,被配置为根据所述摄影机间隔计算单元计算的间隔,写入在由所述左摄影机和所述右摄影机获取的成像面积均大于本地成像面积的左图像和右图像中的、显示器大小的左图像和右图像,
其中,所述临界视差由下式表示:
PS=PD×(WS/WD)
其中,
Ps表示在所述图像传感器的远点处的临界视差,
WS表示所述图像传感器的水平宽度;
PD表示所述中等尺寸立体显示器的远点极限视差;以及
WD表示所述立体显示器的水平宽度。
26.一种制作一源多用OSMU式立体视频内容的方法,包括:
通过立体摄影机拍摄物体,所述立体摄影机包括左摄影机和右摄影机,所述左摄影机和右摄影机均包括图像传感器和镜头,所述立体摄影机被设置为在摄影机之间具有固定间隔,所述图像传感器和所述镜头的视野对应的成像面积均大于本地成像面积;
确定图像的远点,所述图像的焦点已经被调节到所拍摄的物体;
基于中等尺寸立体显示器的远点极限视差,计算所述图像的远点处的最大允许临界视差;
基于所计算的临界视差,计算所述摄影机之间的间隔;
根据所计算的、摄影机之间的间隔,存储由所述左摄影机和所述右摄影机获取的成像面积均大于本地成像面积的左图像和右图像中的、显示器大小的左图像和右图像,
其中,所述临界视差由下式表示:
PS=PD×(WS/WD)
其中,
Ps表示在所述图像传感器的远点处的临界视差,
WS表示所述图像传感器的水平宽度;
PD表示所述中等尺寸立体显示器的远点极限视差;以及
WD表示所述立体显示器的水平宽度。
27.一种一源多用OSMU式立体摄影机,包括:
左摄影机和右摄影机,包括图像传感器和镜头,所述镜头的光轴彼此平行地被固定,所述图像传感器和所述镜头的视野对应的成像面积均大于本地成像面积;
临界视差计算单元,被配置为将所述立体摄影机的焦点调节到物体并且确定其焦点已经被调节到所述物体的图像的远点,从而在所述光轴之间的间隔固定的情况下,基于中等尺寸立体显示器的远点极限视差,计算所述图像的远点处的最大允许临界视差;
摄影机间隔计算单元,被配置为基于所计算的临界视差,计算所述平行光轴之间的间隔;
图像存储单元,被配置为存储由所述左摄影机和所述右摄影机获取的左图像和右图像,
其中,所述左摄影机和所述右摄影机的图像传感器中的每一个均根据所计算的间隔,仅输出显示器大小的像素数据,
其中,所述临界视差由下式表示:
PS=PD×(WS/WD)
其中,
Ps表示在所述图像传感器的远点处的临界视差,
WS表示所述图像传感器的水平宽度;
PD表示所述中等尺寸立体显示器的远点极限视差;以及
WD表示所述立体显示器的水平宽度。
28.一种制作一源多用OSMU式立体视频内容的方法,包括:
通过立体摄影机拍摄物体,所述立体摄影机包括图像传感器和具有大于本地成像面积的成像面积的镜头,所述立体摄影机被设置为在摄影机之间具有固定间隔;
确定图像的远点,所述图像的焦点已经被调节到所拍摄的物体;
基于中等尺寸立体显示器的远点极限视差,计算所述图像的远点处的最大临界视差;
基于所计算的视差,计算摄影机之间的间隔;
根据所计算的、摄影机之间的间隔,从所述图像传感器输出具有显示器大小的像素数据;以及
存储所输出的、具有所述显示器大小的像素数据,
其中,所述临界视差由下列等式表示:
PS=PD×(WS/WD)
其中,
Ps表示在所述图像传感器的远点处的临界视差,
Ws表示所述图像传感器的水平宽度;
PD表示所述中等尺寸立体显示器的远点极限视差;以及
WD表示所述立体显示器的水平宽度。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020070100904A KR101313740B1 (ko) | 2007-10-08 | 2007-10-08 | 원소스 멀티유즈 스테레오 카메라 및 스테레오 영상 컨텐츠제작방법 |
KR10-2007-0100904 | 2007-10-08 | ||
PCT/KR2008/005897 WO2009048254A1 (en) | 2007-10-08 | 2008-10-08 | Osmu(one source multi use)-type stereoscopic camera and method of making stereoscopic video content thereof |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101843107A CN101843107A (zh) | 2010-09-22 |
CN101843107B true CN101843107B (zh) | 2012-08-15 |
Family
ID=40549359
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2008801140863A Active CN101843107B (zh) | 2007-10-08 | 2008-10-08 | Osmu(一源多用)式立体摄影机及制作其立体视频内容的方法 |
Country Status (9)
Country | Link |
---|---|
US (1) | US8482600B2 (zh) |
EP (2) | EP2230858A3 (zh) |
JP (1) | JP5572094B2 (zh) |
KR (1) | KR101313740B1 (zh) |
CN (1) | CN101843107B (zh) |
BR (1) | BRPI0818500A2 (zh) |
CA (1) | CA2701785C (zh) |
MX (1) | MX2010003645A (zh) |
WO (1) | WO2009048254A1 (zh) |
Families Citing this family (36)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8791984B2 (en) * | 2007-11-16 | 2014-07-29 | Scallop Imaging, Llc | Digital security camera |
JP5425554B2 (ja) * | 2009-07-27 | 2014-02-26 | 富士フイルム株式会社 | 立体撮像装置及び立体撮像方法 |
KR101121421B1 (ko) * | 2010-02-23 | 2012-03-20 | 주식회사 빅아이 | 입체영상 제작시의 카메라 간격 제공방법, 프로그램 기록매체 및 입체영상 생성기 |
US9001227B2 (en) | 2010-04-05 | 2015-04-07 | Qualcomm Incorporated | Combining data from multiple image sensors |
US8896668B2 (en) * | 2010-04-05 | 2014-11-25 | Qualcomm Incorporated | Combining data from multiple image sensors |
CN102860017B (zh) * | 2010-04-28 | 2015-06-10 | 富士胶片株式会社 | 立体摄像装置及其制造方法 |
EP2395764B1 (en) | 2010-06-14 | 2016-02-17 | Nintendo Co., Ltd. | Storage medium having stored therein stereoscopic image display program, stereoscopic image display device, stereoscopic image display system, and stereoscopic image display method |
TW201200959A (en) * | 2010-06-29 | 2012-01-01 | Fujifilm Corp | One-eyed stereo photographic device |
EP2434764A1 (en) | 2010-09-23 | 2012-03-28 | Thomson Licensing | Adaptation of 3D video content |
JP5681588B2 (ja) * | 2010-09-30 | 2015-03-11 | 富士フイルム株式会社 | 立体画像編集装置および立体画像編集方法 |
US8879902B2 (en) * | 2010-10-08 | 2014-11-04 | Vincent Pace & James Cameron | Integrated 2D/3D camera with fixed imaging parameters |
WO2012101916A1 (ja) | 2011-01-25 | 2012-08-02 | 富士フイルム株式会社 | 立体動画処理装置、立体動画処理プログラム及びその記録媒体、立体撮像装置並びに立体動画処理方法 |
WO2012105120A1 (ja) * | 2011-02-03 | 2012-08-09 | 富士フイルム株式会社 | 立体動画再生装置、立体動画再生プログラムならびにその記録媒体、立体ディスプレイ装置、立体撮像装置及び立体動画再生方法 |
KR101824439B1 (ko) * | 2011-02-16 | 2018-02-02 | 주식회사 스테레오피아 | 모바일 스테레오 카메라 장치 및 그 촬영방법 |
KR20130024504A (ko) * | 2011-08-31 | 2013-03-08 | 삼성전기주식회사 | 삼차원 카메라 시스템 및 주시각 조정 방법 |
KR101219859B1 (ko) * | 2011-08-31 | 2013-01-09 | 성균관대학교산학협력단 | 3d촬영장치에서의 반자동 주시각 제어장치 및 반자동 주시각 제어방법 |
US20130057655A1 (en) * | 2011-09-02 | 2013-03-07 | Wen-Yueh Su | Image processing system and automatic focusing method |
US20140225991A1 (en) * | 2011-09-02 | 2014-08-14 | Htc Corporation | Image capturing apparatus and method for obatining depth information of field thereof |
CN103930826B (zh) * | 2011-09-13 | 2016-12-28 | 富士胶片株式会社 | 立体摄像装置 |
JP5989315B2 (ja) * | 2011-09-22 | 2016-09-07 | 任天堂株式会社 | 表示制御プログラム、表示制御システム、表示制御装置、および、表示制御方法 |
KR101888967B1 (ko) * | 2011-12-16 | 2018-08-20 | 엘지이노텍 주식회사 | 3차원 카메라 모듈 및 그의 오토 포커싱 방법 |
US20130208107A1 (en) * | 2012-02-14 | 2013-08-15 | Nokia Corporation | Apparatus and a Method for Producing a Depth-Map |
US9743069B2 (en) * | 2012-08-30 | 2017-08-22 | Lg Innotek Co., Ltd. | Camera module and apparatus for calibrating position thereof |
CN103888750B (zh) * | 2012-12-20 | 2016-02-24 | 比比威株式会社 | 三维影像拍摄控制系统及方法 |
US20140267617A1 (en) * | 2013-03-15 | 2014-09-18 | Scott A. Krig | Adaptive depth sensing |
US9282265B2 (en) * | 2013-09-09 | 2016-03-08 | Omnivision Technologies, Inc. | Camera devices and systems based on a single image sensor and methods for manufacturing the same |
WO2015088057A1 (ko) | 2013-12-10 | 2015-06-18 | 엘지전자 주식회사 | 3d 카메라 모듈 |
WO2015143547A1 (en) * | 2014-03-25 | 2015-10-01 | 6115187 CANADA INC. d/b/a IMMERVISION, INC. | Automated definition of system behavior or user experience by recording, sharing, and processing information associated with wide-angle image |
US9196039B2 (en) | 2014-04-01 | 2015-11-24 | Gopro, Inc. | Image sensor read window adjustment for multi-camera array tolerance |
US11019323B2 (en) * | 2015-02-06 | 2021-05-25 | Tara Chand Singhal | Apparatus and method for 3D like camera system in a handheld mobile wireless device |
US10119809B2 (en) * | 2015-02-16 | 2018-11-06 | Intel Corporation | Simulating multi-camera imaging systems |
CN106331679B (zh) * | 2015-06-30 | 2018-07-06 | 深圳市墨克瑞光电子研究院 | 双目相机间距调节方法及装置 |
US9953403B2 (en) * | 2016-06-10 | 2018-04-24 | The Boeing Company | Stereoscopic camera and associated method of varying a scale of a stereoscopic image pair |
US10768345B2 (en) * | 2016-09-13 | 2020-09-08 | Lg Innotek Co., Ltd. | Dual camera module, optical device, camera module, and method for operating camera module |
CN109525830A (zh) * | 2018-11-28 | 2019-03-26 | 浙江未来技术研究院(嘉兴) | 一种立体视频采集系统 |
CN111726599B (zh) * | 2019-03-22 | 2022-04-05 | 舜宇光学(浙江)研究院有限公司 | 双目异内参摄像-显像光学系统的匹配方法及其系统和电子设备 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0641132A1 (en) * | 1993-08-26 | 1995-03-01 | Matsushita Electric Industrial Co., Ltd. | Stereoscopic image pickup and display apparatus |
CN1278075A (zh) * | 1999-06-11 | 2000-12-27 | 稻叶稔 | 立体照相机 |
CN1934874A (zh) * | 2004-03-18 | 2007-03-21 | 索尼电子有限公司 | 用于个人电子装置的三维获取和显像系统 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5063441A (en) * | 1990-10-11 | 1991-11-05 | Stereographics Corporation | Stereoscopic video cameras with image sensors having variable effective position |
US6005607A (en) * | 1995-06-29 | 1999-12-21 | Matsushita Electric Industrial Co., Ltd. | Stereoscopic computer graphics image generating apparatus and stereoscopic TV apparatus |
JPH10155104A (ja) * | 1996-11-22 | 1998-06-09 | Canon Inc | 複眼撮像方法及び装置並びに記憶媒体 |
JPH11341522A (ja) * | 1998-05-22 | 1999-12-10 | Fuji Photo Film Co Ltd | 立体画像撮影装置 |
JP4149037B2 (ja) * | 1998-06-04 | 2008-09-10 | オリンパス株式会社 | 映像システム |
KR100350579B1 (ko) * | 1999-06-23 | 2002-08-28 | 미노루 이나바 | 스테레오 카메라 |
JP2001016619A (ja) * | 1999-06-30 | 2001-01-19 | Canon Inc | 撮像装置、その輻輳距離決定方法、記憶媒体および光学装置 |
EP1085769B1 (en) * | 1999-09-15 | 2012-02-01 | Sharp Kabushiki Kaisha | Stereoscopic image pickup apparatus |
JP2001218228A (ja) * | 2000-02-01 | 2001-08-10 | Canon Inc | 立体画像撮影用光学系及びそれを用いた立体画像撮影装置 |
JP3749227B2 (ja) * | 2002-03-27 | 2006-02-22 | 三洋電機株式会社 | 立体画像処理方法および装置 |
JP4490074B2 (ja) * | 2003-04-17 | 2010-06-23 | ソニー株式会社 | 立体視画像処理装置、立体視画像表示装置、立体視画像提供方法、および立体視画像処理システム |
JP2005297168A (ja) * | 2004-04-16 | 2005-10-27 | Fujinon Corp | 遠隔操作ロボット |
KR100622042B1 (ko) * | 2004-07-21 | 2006-09-13 | 한국방송공사 | 양안식 스테레오 카메라 시스템의 카메라 구동장치 및 제어방법 |
DE102005040335B4 (de) | 2005-03-10 | 2009-07-30 | Inaba, Minoru, Oyama | Digitale Stereokamera und Digitale Stereovideokamera |
JP4275643B2 (ja) * | 2005-04-19 | 2009-06-10 | 稔 稲葉 | ディジタルステレオカメラ又はディジタルステレオビデオカメラ |
DE202007010389U1 (de) * | 2007-07-24 | 2007-09-27 | Maier, Florian | Vorrichtung zur automatischen Positionierung von gekoppelten Kameras zur plastischen Bilddarstellung |
-
2007
- 2007-10-08 KR KR1020070100904A patent/KR101313740B1/ko active IP Right Grant
-
2008
- 2008-10-08 CA CA2701785A patent/CA2701785C/en not_active Expired - Fee Related
- 2008-10-08 MX MX2010003645A patent/MX2010003645A/es not_active Application Discontinuation
- 2008-10-08 JP JP2010528799A patent/JP5572094B2/ja active Active
- 2008-10-08 US US12/734,017 patent/US8482600B2/en active Active
- 2008-10-08 WO PCT/KR2008/005897 patent/WO2009048254A1/en active Application Filing
- 2008-10-08 EP EP10006847.7A patent/EP2230858A3/en not_active Withdrawn
- 2008-10-08 BR BRPI0818500 patent/BRPI0818500A2/pt not_active IP Right Cessation
- 2008-10-08 CN CN2008801140863A patent/CN101843107B/zh active Active
- 2008-10-08 EP EP08836985.5A patent/EP2201785A4/en not_active Withdrawn
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0641132A1 (en) * | 1993-08-26 | 1995-03-01 | Matsushita Electric Industrial Co., Ltd. | Stereoscopic image pickup and display apparatus |
CN1278075A (zh) * | 1999-06-11 | 2000-12-27 | 稻叶稔 | 立体照相机 |
CN1934874A (zh) * | 2004-03-18 | 2007-03-21 | 索尼电子有限公司 | 用于个人电子装置的三维获取和显像系统 |
Also Published As
Publication number | Publication date |
---|---|
EP2201785A4 (en) | 2014-02-19 |
US20100231691A1 (en) | 2010-09-16 |
KR20090035880A (ko) | 2009-04-13 |
BRPI0818500A2 (pt) | 2015-04-22 |
CA2701785A1 (en) | 2009-04-16 |
CN101843107A (zh) | 2010-09-22 |
EP2230858A3 (en) | 2014-02-19 |
US8482600B2 (en) | 2013-07-09 |
EP2230858A2 (en) | 2010-09-22 |
WO2009048254A1 (en) | 2009-04-16 |
JP2010541513A (ja) | 2010-12-24 |
JP5572094B2 (ja) | 2014-08-13 |
EP2201785A1 (en) | 2010-06-30 |
KR101313740B1 (ko) | 2013-10-15 |
CA2701785C (en) | 2016-05-17 |
MX2010003645A (es) | 2010-08-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101843107B (zh) | Osmu(一源多用)式立体摄影机及制作其立体视频内容的方法 | |
US9848184B2 (en) | Stereoscopic display system using light field type data | |
CN101587386B (zh) | 光标处理方法、装置及系统 | |
CN103477645B (zh) | 移动设备用立体摄像机装置及其拍摄方法 | |
CN105103034A (zh) | 显示器 | |
KR102174258B1 (ko) | 무안경 3d 디스플레이 장치 및 그 제어 방법 | |
US10805601B2 (en) | Multiview image display device and control method therefor | |
CN110915206A (zh) | 用于产生看起来是投影在电子显示器前方或上方的虚拟三维图像的系统、方法和软件 | |
CN111050148A (zh) | 基于三折幕场地的投影方法及系统、三折幕场地 | |
US11036048B2 (en) | Virtual reality system and method for displaying on a real-world display a viewable portion of a source file projected on an inverse spherical virtual screen | |
CN102740103B (zh) | 图像处理设备、图像处理方法 | |
WO2018134946A1 (ja) | 画像生成装置、及び画像表示制御装置 | |
CN110060349B (zh) | 一种扩展增强现实头戴式显示设备视场角的方法 | |
JP2014135714A (ja) | 立体映像信号処理装置及び立体映像撮像装置 | |
CN103959765A (zh) | 用于立体地观看动态图像的系统 | |
KR101376734B1 (ko) | 원소스 멀티유즈 스테레오 카메라 및 스테레오 영상 컨텐츠 제작방법 | |
CN111179407A (zh) | 虚拟场景的创建方法、投影方法及系统、智能设备 | |
CN102970498A (zh) | 菜单立体显示的显示方法及显示装置 | |
Lee et al. | Eye tracking based glasses-free 3D display by dynamic light field rendering | |
Nishimura et al. | Autostereoscopic display with wide viewing zone using binocular image control method in divided area based on viewing position | |
CN111050156A (zh) | 基于四折幕场地的投影方法及系统、四折幕场地 | |
CN111050147A (zh) | 基于五折幕场地的投影方法及系统、五折幕场地 | |
CN111050145A (zh) | 一种多屏融合成像的方法、智能设备及系统 | |
JP2014116818A (ja) | 全天周立体映像表示装置、全天周立体映像表示方法、映像データ補正プログラム | |
JP2011082935A (ja) | 画像処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |