CN105139336B - 一种多通道全景影像转换球幕鱼眼影片的方法 - Google Patents

一种多通道全景影像转换球幕鱼眼影片的方法 Download PDF

Info

Publication number
CN105139336B
CN105139336B CN201510512958.3A CN201510512958A CN105139336B CN 105139336 B CN105139336 B CN 105139336B CN 201510512958 A CN201510512958 A CN 201510512958A CN 105139336 B CN105139336 B CN 105139336B
Authority
CN
China
Prior art keywords
points
ball curtain
full
view image
point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510512958.3A
Other languages
English (en)
Other versions
CN105139336A (zh
Inventor
孙德志
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Silkroading Culture Development Co Ltd
Original Assignee
Beijing Silkroading Culture Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Silkroading Culture Development Co Ltd filed Critical Beijing Silkroading Culture Development Co Ltd
Priority to CN201510512958.3A priority Critical patent/CN105139336B/zh
Publication of CN105139336A publication Critical patent/CN105139336A/zh
Application granted granted Critical
Publication of CN105139336B publication Critical patent/CN105139336B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformation in the plane of the image
    • G06T3/40—Scaling the whole image or part thereof
    • G06T3/4038—Scaling the whole image or part thereof for image mosaicing, i.e. plane images composed of plane sub-images
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/04—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with cameras or projectors providing touching or overlapping fields of view
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/32—Indexing scheme for image data processing or generation, in general involving image mosaicing

Abstract

本发明公开了一种多通道全景影像转换球幕鱼眼影片的方法，涉及电通信技术领域。该方法包括：S1，球面第一步映射：选取位于O点的摄像机拍摄的全景影像中的任意一点a，获取a点映射到球面上的A点的坐标；S2，对所有摄像机拍摄的全景影像进行步骤S1中所述球面第一步映射，得到全景影像映射到三维球幕的球幕影像；S3，对三维球幕的球幕影像进行等距投影变换以得到球幕鱼眼影片。本发明将多台运动摄像机拍摄的不同角度的动态画面，融合拼接成一幅完整的4K*4K的鱼眼动态画面，实现真正意义上的4K鱼眼影片拍摄工作。

Description

一种多通道全景影像转换球幕鱼眼影片的方法
技术领域
本发明涉及电通信技术领域，尤其涉及一种多通道全景影像转换球幕鱼眼影片的方法。
背景技术
长期以来，全景鱼眼影片的拍摄都是利用摄影机机配合鱼眼镜头进行的。这种方式机器价格昂贵，例如一台现阶段最高端的SONY f65 8K摄像机，其CMOS的比例为1:4。在利用鱼眼镜头时，也只能够拍摄2K*2K的鱼眼影片。而无法达到现阶段数字球幕影院的4K*4K的放映标准。
发明内容
本发明的目的在于提供一种多通道全景影像转换球幕鱼眼影片的方法，从而解决现有技术中存在的前述问题。
为了实现上述目的，本发明所述多通道全景影像转换球幕鱼眼影片的方法，该方法包括：
S1，球面第一步映射
选取位于O点的摄像机拍摄的全景影像中的任意一点a，设O点的坐标为(0,0,0)，a点坐标(X1,Y1,Z1)，获取a点映射到球面上的A点的坐标 其中，R表示球体的半径；
S2，对所有摄像机拍摄的全景影像进行步骤S1中所述球面第一步映射，得到全景影像映射到三维球幕的球幕影像；
S3，对三维球幕的球幕影像进行等距投影变换以得到球幕鱼眼影片；
S31，设球幕上投射点T点的直角坐标为T(x,y,z)，且，T点用三个有次序的数(r，θ，)确定，其中，r表示O点与T点间的距离；θ为有向线段OT与z轴正向的夹角；为从正z轴来看自x轴按逆时针方向转到OM所转过的角，这里M为T点在直角坐标系中xOy面上的投影；所述球幕上投射点T点即步骤S1中所述A点；
S32，设P点为T点在纹理画面所在的纹理坐标系中对应的点，P点的纹理位置坐标(x1，y1)，则P点的极坐标用两个有次序的数(r1，)确定，根据等距投影的原理r1，与r，θ，具有公式(2)和公式(3)所述关系：
r1＝kθ (2)；
其中，r1为O点与P点间的距离；为有向线段OP与x轴正向的夹角；k表示镜头到成像平面的距离；
通过公式(2)和公式(3)，求出球幕影像的任意一个投射点在纹理画面上的纹理位置坐标，即为所求鱼眼影片各像素的纹理位置坐标。
优选地，在步骤S1中，按照下述方法获取A点的坐标：
S11，依据光线的直线传播原理，a点在直线传播下，映射到球面上为A点，A点为Oa连线与球面的交点；A点为球空间内一点；
S12，已知O点坐标(0，0，0)，a点坐标(X1,Y1,Z1)，故存在公式(1)：
由公式(1)，得出A点坐标为：
优选地，在步骤S1之前，还包括以下步骤：
利用至少5个摄像机，获取视野范围的所有全景影像，所述全景影像通过五个方向获取，所述五个方向包括所处位置的前、后、左、右和上；
上述每个方向拍摄的照片与1个或多个其他方向拍摄的照片有重叠。
更优选地，所述重叠包括：
前、后、左、右中的任意一个方向拍摄的照片与上方向拍摄的照片存在两部分重合；
前、后、左、右中的相邻两个方向拍摄的照片与上方向拍摄的照片存在三部分重合。
更优选地，所述摄像机为4K运动摄像机。
本发明的有益效果是：
本发明利用多台小型4K运动摄像机拍摄不同角度的动态画面，最后利用本发明中提到的算法，将其融合拼接成一幅完整的4K*4K的鱼眼动态画面。从而实现真正意义上的4K鱼眼影片拍摄工作。
附图说明
图1是球面第一步映射示意图；
图2是球面(鱼眼)等距映射转换示意图；
图3是为球幕点投射点所在坐标系的示意图；
图4是为纹理画面中的点所在的纹理坐标系示意图；
图5是多通道相机拍摄范围包括前、左方向的第一示意图；
图6是多通道相机拍摄范围包括后、右方向的第二示意图。
其中，1、2、3、4分别代表前、左、后、右4个方向的拍摄方向，5代表上方向的拍摄方向；I、II、III、IV代表1、2、3、4中任意一个拍摄方向与5拍摄方向的重合区域。a、b、c、d代表1、2、3、4中相邻两个拍摄方向与5拍摄方向的三部分重合的区域。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施方式仅仅用以解释本发明，并不用于限定本发明。
实施例
多通道全景影像转换球幕鱼眼影片的方法，该方法具体包括：
S1，球面第一步映射(参照图1)
选取位于O点的摄像机拍摄的全景影像中的任意一点a，设O点的坐标为(0,0,0)，a点坐标(X1,Y1,Z1)，获取a点映射到球面上的A点的坐标 其中，R表示球体的半径；
S2，对所有摄像机拍摄的全景影像进行步骤S1中所述球面第一步映射，得到全景影像映射到三维球幕的球幕影像；
S3，对垂直投影的球幕影像进行等距映射转换(参照图2)
S31，设球幕上投射点T点的直角坐标为T(x,y,z)，且，T点用三个有次序的数(r，θ，)确定(参照图3)，其中，r表示O点与T点间的距离；θ为有向线段OT与z轴正向的夹角；为从正z轴来看自x轴按逆时针方向转到OM所转过的角，这里M为T点在直角坐标系中xOy面上的投影；所述球幕上投射点T点即步骤S1中所述A点；
S32，设P点为T点在纹理画面所在的纹理坐标系中对应的点，P点的纹理位置坐标(x1，y1)(参照图4)，则P点的极坐标用两个有次序的数(r1，)确定，根据等距投影的原理r1，与r，θ，具有公式(2)和公式(3)所述关系：
r1＝kθ (2)；
其中，r1为O点与P点间的距离；为有向线段OP与x轴正向的夹角；k表示镜头到成像平面的距离；
通过公式(2)和公式(3)，求出球幕影像的任意一个投射点在纹理画面上的纹理位置坐标，即为所求鱼眼影片各像素的纹理位置坐标。
在本实施例中，在步骤S1中，按照下述方法获取A点的坐标：
S11，依据光线的直线传播原理，a点在直线传播下，映射到球面上为A点，A点为Oa连线与球面的交点；A点为球空间内一点；
S12，已知O点坐标(0，0，0)，a点坐标(X1,Y1,Z1)，故存在公式(1)：
由公式(1)，得出A点坐标为：
在本实施例中，在步骤S1之前，还包括以下步骤：
利用至少5个4K运动摄像机。，获取视野范围的所有全景影像，所述全景影像通过五个方向获取，所述五个方向包括所处位置的前、后、左、右和上参照图5和图6；每个方向拍摄的照片与1个或多个其他方向拍摄的照片有重叠。
所述重叠包括：前、后、左、右中的任意一个方向拍摄的照片与上方向拍摄的照片存在两部分重合；前、后、左、右中的相邻两个方向拍摄的照片与上方向拍摄的照片存在三部分重合。
本实施例中，球幕(鱼眼)的画面是一副等距映射影像，第一步转换过程中完成的是一个拍摄画面到三维球幕影像的映射过程，为了满足鱼眼影像的变形要求，这一步即对所得到的三维球幕的影像进行等距投影变换，得到变形符合鱼眼拍摄的二维鱼眼影像。
通过采用本发明公开的上述技术方案，得到了如下有益的效果：本发明利用多台小型4K运动摄像机拍摄不同角度的动态画面，最后利用该软件中提到的算法，将其融合拼接成一幅完整的4K*4K的鱼眼动态画面。从而实现真正意义上的4K鱼眼影片拍摄工作。
以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视本发明的保护范围。

Claims (5)

1.一种多通道全景影像转换球幕鱼眼影片的方法，其特征在于，该方法包括：
S1，球面第一步映射
选取位于O点的摄像机拍摄的全景影像中的任意一点a，设O点的坐标为(0,0,0)，a点坐标(X1,Y1,Z1)，获取a点映射到球面上的A点的坐标 其中，R表示球体的半径；
S2，对所有摄像机拍摄的全景影像进行步骤S1中所述球面第一步映射，得到全景影像映射到三维球幕的球幕影像；
S3，对三维球幕的球幕影像进行等距投影变换以得到球幕鱼眼影片；
S31，设球幕上投射点T点的直角坐标为T(x,y,z)，且，T点用三个有次序的数确定，其中，r表示O点与T点间的距离；θ为有向线段OT与z轴正向的夹角；为从正z轴来看自x轴按逆时针方向转到OM所转过的角，M为T点在直角坐标系中xOy面上的投影；所述球幕上投射点T点即步骤S1中所述A点；
S32，设P点为T点在纹理画面所在的纹理坐标系中对应的点，P点的纹理位置坐标(x1，y1)，则P点的极坐标用两个有次序的数确定，根据等距投影的原理r1，与θ，具有公式(2)和公式(3)所述关系：
r1＝kθ (2)；
其中，r1为O点与P点间的距离；为有向线段OP与x轴正向的夹角；
通过公式(2)和公式(3)，求出球幕影像的任意一个投射点在纹理画面上的纹理位置坐标，即为所求鱼眼影片各像素的纹理位置坐标。
2.根据权利要求1所述方法，其特征在于，在步骤S1中，按照下述方法获取A点的坐标：
S11，依据光线的直线传播原理，a点在直线传播下，映射到球面上为A点，A点为Oa连线与球面的交点；A点为球空间内一点；
S12，已知O点坐标(0，0，0)，a点坐标(X1,Y1,Z1)，故存在公式(1)：
由公式(1)，得出A点坐标为：
3.根据权利要求1所述方法，其特征在于，在步骤S1之前，还包括以下步骤：
利用至少5个摄像机，获取视野范围的所有全景影像，所述全景影像通过五个方向获取，所述五个方向包括所处位置的前、后、左、右和上；
上述每个方向拍摄的照片与1个或多个其他方向拍摄的照片有重叠。
4.根据权利要求3所述方法，其特征在于，所述重叠包括：
前、后、左、右中的任意一个方向拍摄的照片与上方向拍摄的照片存在两部分重合；
前、后、左、右中的相邻两个方向拍摄的照片与上方向拍摄的照片存在三部分重合。
5.根据权利要求3所述方法，其特征在于，所述摄像机为4K运动摄像机。
CN201510512958.3A 2015-08-19 2015-08-19 一种多通道全景影像转换球幕鱼眼影片的方法 Active CN105139336B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510512958.3A CN105139336B (zh) 2015-08-19 2015-08-19 一种多通道全景影像转换球幕鱼眼影片的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510512958.3A CN105139336B (zh) 2015-08-19 2015-08-19 一种多通道全景影像转换球幕鱼眼影片的方法

Publications (2)

Publication Number Publication Date
CN105139336A CN105139336A (zh) 2015-12-09
CN105139336B true CN105139336B (zh) 2018-06-22

Family

ID=54724669

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510512958.3A Active CN105139336B (zh) 2015-08-19 2015-08-19 一种多通道全景影像转换球幕鱼眼影片的方法

Country Status (1)

Country Link
CN (1) CN105139336B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105912561B (zh) * 2016-02-26 2019-08-09 优势拓展（北京）科技有限公司 全景图像的网络发布方法和系统及设备
CN107203965B (zh) * 2016-03-18 2020-03-10 中国科学院宁波材料技术与工程研究所 一种基于多通道图像融合的全景图像拼接方法
US20180018807A1 (en) * 2016-07-15 2018-01-18 Aspeed Technology Inc. Method and apparatus for generating panoramic image with texture mapping
CN113497930A (zh) * 2020-03-20 2021-10-12 华为技术有限公司 一种显示方法及控制显示的装置
CN111491157B (zh) * 2020-04-21 2021-09-07 青岛联合创智科技有限公司 一种构建手机3d模型引导图像全面采集的方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101938599A (zh) * 2009-06-30 2011-01-05 爱国者全景(北京)网络科技发展有限公司 生成互动的动态全景影像的方法
CN102929091A (zh) * 2012-08-03 2013-02-13 吉林禹硕动漫游戏科技股份有限公司 数字球幕立体电影的制作方法
CN104835117A (zh) * 2015-05-11 2015-08-12 合肥工业大学 基于重叠方式的球面全景图生成方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101938599A (zh) * 2009-06-30 2011-01-05 爱国者全景(北京)网络科技发展有限公司 生成互动的动态全景影像的方法
CN102929091A (zh) * 2012-08-03 2013-02-13 吉林禹硕动漫游戏科技股份有限公司 数字球幕立体电影的制作方法
CN104835117A (zh) * 2015-05-11 2015-08-12 合肥工业大学 基于重叠方式的球面全景图生成方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
多投影仪拼接显示的实现;曹双喜 等;《计算机工程与应用》;20051231(第2期);全文 *

Also Published As

Publication number Publication date
CN105139336A (zh) 2015-12-09

Similar Documents

Publication Publication Date Title
US10425638B2 (en) Equipment and method for promptly performing calibration and verification of intrinsic and extrinsic parameters of a plurality of image capturing elements installed on electronic device
CN105139336B (zh) 一种多通道全景影像转换球幕鱼眼影片的方法
US20170127045A1 (en) Image calibrating, stitching and depth rebuilding method of a panoramic fish-eye camera and a system thereof
CN102821238B (zh) 宽视场超高分辨率成像系统
CN104778656B (zh) 基于球面透视投影的鱼眼图像校正方法
CN103971375B (zh) 一种基于图像拼接的全景凝视相机空间标定方法
KR20180101165A (ko) 파노라마 프레임으로의 프레임 스티칭
US9123171B1 (en) Enhancing the coupled zone of a stereoscopic display
CN106331527A (zh) 一种图像拼接方法及装置
CN103337094A (zh) 一种应用双目摄像机实现运动三维重建的方法
CN105208247A (zh) 一种基于四元数的全景稳像方法
WO2012050040A1 (ja) 立体映像変換装置及び立体映像表示装置
TWI527434B (zh) 利用光場相機產生立體影像的方法及光場相機
CN103295231A (zh) 一种鱼眼图像拼接中鱼眼镜头垂直映射图像几何校正方法
CN102620713A (zh) 一种利用双摄像头测距和定位的方法
CN106447602A (zh) 一种图像拼接方法及装置
CN104618648A (zh) 一种全景视频拼接系统及拼接方法
CN104599317A (zh) 一种实现3d扫描建模功能的移动终端及方法
CN107016707B (zh) 一种集成成像超大三维场景拍摄图像校正方法
JP2010276433A (ja) 撮像装置、画像処理装置及び距離計測装置
CN107545537A (zh) 一种从稠密点云生成3d全景图片的方法
TWI820246B (zh) 具有像差估計之設備、估計來自廣角影像的像差之方法及電腦程式產品
CN114359406A (zh) 自动对焦双目摄像头的标定、3d视觉及深度点云计算方法
CN108205799B (zh) 一种图像拼接方法及装置
CN110766752A (zh) 一种带反光标志点的虚拟现实交互眼镜及空间定位方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant