CN105139336A - 一种多通道全景影像转换球幕鱼眼影片的方法 - Google Patents

一种多通道全景影像转换球幕鱼眼影片的方法 Download PDF

Info

Publication number
CN105139336A
CN105139336A CN201510512958.3A CN201510512958A CN105139336A CN 105139336 A CN105139336 A CN 105139336A CN 201510512958 A CN201510512958 A CN 201510512958A CN 105139336 A CN105139336 A CN 105139336A
Authority
CN
China
Prior art keywords
point
coordinate
ball curtain
full
photo
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510512958.3A
Other languages
English (en)
Other versions
CN105139336B (zh
Inventor
孙德志
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Silkroading Culture Development Co Ltd
Original Assignee
Beijing Silkroading Culture Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Silkroading Culture Development Co Ltd filed Critical Beijing Silkroading Culture Development Co Ltd
Priority to CN201510512958.3A priority Critical patent/CN105139336B/zh
Publication of CN105139336A publication Critical patent/CN105139336A/zh
Application granted granted Critical
Publication of CN105139336B publication Critical patent/CN105139336B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/04—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with cameras or projectors providing touching or overlapping fields of view
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/32—Indexing scheme for image data processing or generation, in general involving image mosaicing

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种多通道全景影像转换球幕鱼眼影片的方法，涉及电通信技术领域。该方法包括：S1，球面第一步映射：选取位于O点的摄像机拍摄的全景影像中的任意一点a，获取a点映射到球面上的A点的坐标；S2，对所有摄像机拍摄的全景影像进行步骤S1中所述球面第一步映射，得到全景影像映射到三维球幕的球幕影像；S3，对三维球幕的球幕影像进行等距投影变换以得到球幕鱼眼影片。本发明将多台运动摄像机拍摄的不同角度的动态画面，融合拼接成一幅完整的4K*4K的鱼眼动态画面，实现真正意义上的4K鱼眼影片拍摄工作。

Description

一种多通道全景影像转换球幕鱼眼影片的方法
技术领域
本发明涉及电通信技术领域，尤其涉及一种多通道全景影像转换球幕鱼眼影片的方法。
背景技术
长期以来，全景鱼眼影片的拍摄都是利用摄影机机配合鱼眼镜头进行的。这种方式机器价格昂贵，例如一台现阶段最高端的SONYf658K摄像机，其CMOS的比例为1:4。在利用鱼眼镜头时，也只能够拍摄2K*2K的鱼眼影片。而无法达到现阶段数字球幕影院的4K*4K的放映标准。
发明内容
本发明的目的在于提供一种多通道全景影像转换球幕鱼眼影片的方法，从而解决现有技术中存在的前述问题。
为了实现上述目的，本发明所述多通道全景影像转换球幕鱼眼影片的方法，该方法包括：
S1，球面第一步映射
选取位于O点的摄像机拍摄的全景影像中的任意一点a，设O点的坐标为(0,0,0)，a点坐标(X1,Y1,Z1)，获取a点映射到球面上的A点的坐标其中，R表示球体的半径；
S2，对所有摄像机拍摄的全景影像进行步骤S1中所述球面第一步映射，得到全景影像映射到三维球幕的球幕影像；
S3，对三维球幕的球幕影像进行等距投影变换以得到球幕鱼眼影片；
S31，设球幕上投射点T点的直角坐标为T(x，y，z)，且，T点用三个有次序的数(r，θ，)确定，其中，r表示O点与T点间的距离；θ为有向线段OT与z轴正向的夹角；为从正z轴来看自x轴按逆时针方向转到OM所转过的角，这里M为T点在指教坐标系中xOy面上的投影；所述球幕上投射点T点即步骤S1中所述A点；
S32，设P点为T点在纹理画面所在的纹理坐标系中对应的点，P点的纹理位置坐标(x1，y1)，则P点的极坐标用两个有次序的数(r1，)确定，根据等距投影的原理r1，与r，θ，具有公式(2)和公式(3)所述关系：
r1＝kθ(2)；
其中，r1为O点与P点间的距离；为有向线段OP与x轴正向的夹角；
通过公式(2)和公式(3)，求出球幕影像的任意一个投射点在纹理画面上的纹理位置坐标，即为所求鱼眼影片各像素的纹理位置坐标。
优选地，在步骤S1中，按照下述方法获取A点的坐标：
S11，依据光线的直线传播原理，a点在直线传播下，映射到球面上为A点，A点为Oa连线与球面的交点；A点为球空间内一点；
S12，已知O点坐标(0，0，0)，a点坐标(X1,Y1,Z1)，故存在公式(1)：
由公式(1)，得出A点坐标为：
优选地，在步骤S1之前，还包括以下步骤：
利用至少5个摄像机，获取视野范围的所有全景影像，所述全景影像通过五个方向获取，所述五个方向包括所处位置的前、后、左、右和上；
上述每个方向拍摄的照片与1个或多个其他方向拍摄的照片有重叠。
更优选地，所述重叠包括：
前、后、左、右中的任意一个方向拍摄的照片与上方向拍摄的照片存在两部分重合；
前、后、左、右中的相邻两个方向拍摄的照片与上方向拍摄的照片存在三部分重合。
更优选地，所述摄像机为4K运动摄像机。
本发明的有益效果是：
本发明利用多台小型4K运动摄像机拍摄不同角度的动态画面，最后利用本发明中提到的算法，将其融合拼接成一幅完整的4K*4K的鱼眼动态画面。从而实现真正意义上的4K鱼眼影片拍摄工作。
附图说明
图1是球面第一步映射示意图；
图2是球面(鱼眼)等距映射转换示意图；
图3是为球幕点投射点所在坐标系的示意图；
图4是为纹理画面中的点所在的纹理坐标系示意图；
图5是多通道相机拍摄范围包括前、左方向的第一示意图；
图6是多通道相机拍摄范围包括后、右方向的第二示意图。
其中，1、2、3、4分别代表前、左、后、右4个方向的拍摄方向，5代表上方向的拍摄方向；I、II、III、IV代表1、2、3、4中任意一个拍摄方向与5拍摄方向的重合区域。a、b、c、d代表1、2、3、4中相邻两个拍摄方向与5拍摄方向的三部分重合的区域。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施方式仅仅用以解释本发明，并不用于限定本发明。
实施例
多通道全景影像转换球幕鱼眼影片的方法，该方法具体包括：
S1，球面第一步映射(参照图1)
选取位于O点的摄像机拍摄的全景影像中的任意一点a，设O点的坐标为(0,0,0)，a点坐标(X1,Y1,Z1)，获取a点映射到球面上的A点的坐标 其中，R表示球体的半径；
S2，对所有摄像机拍摄的全景影像进行步骤S1中所述球面第一步映射，得到全景影像映射到三维球幕的球幕影像；
S3，对垂直投影的球幕影像进行等距映射转换(参照图2)
S31，设球幕上投射点T点的直角坐标为T(x，y，z)，且，T点用三个有次序的数(r，θ，)确定(参照图3)，其中，r表示O点与T点间的距离；θ为有向线段OT与z轴正向的夹角；为从正z轴来看自x轴按逆时针方向转到OM所转过的角，这里M为T点在指教坐标系中xOy面上的投影；所述球幕上投射点T点即步骤S1中所述A点；
S32，设P点为T点在纹理画面所在的纹理坐标系中对应的点，P点的纹理位置坐标(x1，y1)(参照图4)，则P点的极坐标用两个有次序的数(r1，)确定，根据等距投影的原理r1，与r，θ，具有公式(2)和公式(3)所述关系：
r1＝kθ(2)；
其中，r1为O点与P点间的距离；为有向线段OP与x轴正向的夹角；
通过公式(2)和公式(3)，求出球幕影像的任意一个投射点在纹理画面上的纹理位置坐标，即为所求鱼眼影片各像素的纹理位置坐标。
在本实施例中，在步骤S1中，按照下述方法获取A点的坐标：
S11，依据光线的直线传播原理，a点在直线传播下，映射到球面上为A点，A点为Oa连线与球面的交点；A点为球空间内一点；
S12，已知O点坐标(0，0，0)，a点坐标(X1,Y1,Z1)，故存在公式(1)：
由公式(1)，得出A点坐标为：
在本实施例中，在步骤S1之前，还包括以下步骤：
利用至少5个4K运动摄像机。，获取视野范围的所有全景影像，所述全景影像通过五个方向获取，所述五个方向包括所处位置的前、后、左、右和上参照图5和图6；每个方向拍摄的照片与1个或多个其他方向拍摄的照片有重叠。
所述重叠包括：前、后、左、右中的任意一个方向拍摄的照片与上方向拍摄的照片存在两部分重合；前、后、左、右中的相邻两个方向拍摄的照片与上方向拍摄的照片存在三部分重合。
本实施例中，球幕(鱼眼)的画面是一副等距映射影像，第一步转换过程中完成的是一个拍摄画面到三维球幕影像的映射过程，为了满足鱼眼影像的变形要求，这一步即对所得到的三维球幕的影像进行等距投影变换，得到变形符合鱼眼拍摄的二维鱼眼影像。
通过采用本发明公开的上述技术方案，得到了如下有益的效果：本发明利用多台小型4K运动摄像机拍摄不同角度的动态画面，最后利用该软件中提到的算法，将其融合拼接成一幅完整的4K*4K的鱼眼动态画面。从而实现真正意义上的4K鱼眼影片拍摄工作。
以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视本发明的保护范围。

Claims (5)

1.一种多通道全景影像转换球幕鱼眼影片的方法，其特征在于，该方法包括：
S1，球面第一步映射
选取位于O点的摄像机拍摄的全景影像中的任意一点a，设O点的坐标为(0,0,0)，a点坐标(X1,Y1,Z1)，获取a点映射到球面上的A点的坐标( )；其中，R表示球体的半径；
S2，对所有摄像机拍摄的全景影像进行步骤S1中所述球面第一步映射，得到全景影像映射到三维球幕的球幕影像；
S3，对三维球幕的球幕影像进行等距投影变换以得到球幕鱼眼影片；
S31，设球幕上投射点T点的直角坐标为T(x，y，z)，且，T点用三个有次序的数确定，其中，r表示O点与T点间的距离；θ为有向线段OT与z轴正向的夹角；为从正z轴来看自x轴按逆时针方向转到OM所转过的角，M为T点在指教坐标系中xOy面上的投影；所述球幕上投射点T点即步骤S1中所述A点；
S32，设P点为T点在纹理画面所在的纹理坐标系中对应的点，P点的纹理位置坐标(x1，y1)，则P点的极坐标用两个有次序的数确定，根据等距投影的原理r1，与r，θ，φ具有公式(2)和公式(3)所述关系：
r1＝kθ(2)；
其中，r1为O点与P点间的距离；为有向线段OP与x轴正向的夹角；
通过公式(2)和公式(3)，求出球幕影像的任意一个投射点在纹理画面上的纹理位置坐标，即为所求鱼眼影片各像素的纹理位置坐标。
2.根据权利要求1所述方法，其特征在于，在步骤S1中，按照下述方法获取A点的坐标：
S11，依据光线的直线传播原理，a点在直线传播下，映射到球面上为A点，A点为Oa连线与球面的交点；A点为球空间内一点；
S12，已知O点坐标(0，0，0)，a点坐标(X1,Y1,Z1)，故存在公式(1)：
由公式(1)，得出A点坐标为：
3.根据权利要求1所述方法，其特征在于，在步骤S1之前，还包括以下步骤：
利用至少5个摄像机，获取视野范围的所有全景影像，所述全景影像通过五个方向获取，所述五个方向包括所处位置的前、后、左、右和上；
上述每个方向拍摄的照片与1个或多个其他方向拍摄的照片有重叠。
4.根据权利要求3所述方法，其特征在于，所述重叠包括：
前、后、左、右中的任意一个方向拍摄的照片与上方向拍摄的照片存在两部分重合；
前、后、左、右中的相邻两个方向拍摄的照片与上方向拍摄的照片存在三部分重合。
5.根据权利要求3所述方法，其特征在于，所述摄像机为4K运动摄像机。
CN201510512958.3A 2015-08-19 2015-08-19 一种多通道全景影像转换球幕鱼眼影片的方法 Active CN105139336B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510512958.3A CN105139336B (zh) 2015-08-19 2015-08-19 一种多通道全景影像转换球幕鱼眼影片的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510512958.3A CN105139336B (zh) 2015-08-19 2015-08-19 一种多通道全景影像转换球幕鱼眼影片的方法

Publications (2)

Publication Number Publication Date
CN105139336A true CN105139336A (zh) 2015-12-09
CN105139336B CN105139336B (zh) 2018-06-22

Family

ID=54724669

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510512958.3A Active CN105139336B (zh) 2015-08-19 2015-08-19 一种多通道全景影像转换球幕鱼眼影片的方法

Country Status (1)

Country Link
CN (1) CN105139336B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105912561A (zh) * 2016-02-26 2016-08-31 优势拓展（北京）科技有限公司 全景图像的网络发布方法和系统及设备
CN107203965A (zh) * 2016-03-18 2017-09-26 中国科学院宁波材料技术与工程研究所 一种基于多通道图像融合的全景图像拼接方法
TWI615810B (zh) * 2016-07-15 2018-02-21 信驊科技股份有限公司 具紋理映射功能的全景影像產生方法及裝置
CN111491157A (zh) * 2020-04-21 2020-08-04 青岛联合创智科技有限公司 一种构建手机3d模型引导图像全面采集的方法
WO2021185085A1 (zh) * 2020-03-20 2021-09-23 华为技术有限公司 一种显示方法及控制显示的装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101938599A (zh) * 2009-06-30 2011-01-05 爱国者全景(北京)网络科技发展有限公司 生成互动的动态全景影像的方法
CN102929091A (zh) * 2012-08-03 2013-02-13 吉林禹硕动漫游戏科技股份有限公司 数字球幕立体电影的制作方法
CN104835117A (zh) * 2015-05-11 2015-08-12 合肥工业大学 基于重叠方式的球面全景图生成方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101938599A (zh) * 2009-06-30 2011-01-05 爱国者全景(北京)网络科技发展有限公司 生成互动的动态全景影像的方法
CN102929091A (zh) * 2012-08-03 2013-02-13 吉林禹硕动漫游戏科技股份有限公司 数字球幕立体电影的制作方法
CN104835117A (zh) * 2015-05-11 2015-08-12 合肥工业大学 基于重叠方式的球面全景图生成方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
曹双喜 等: "多投影仪拼接显示的实现", 《计算机工程与应用》 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105912561A (zh) * 2016-02-26 2016-08-31 优势拓展（北京）科技有限公司 全景图像的网络发布方法和系统及设备
CN105912561B (zh) * 2016-02-26 2019-08-09 优势拓展（北京）科技有限公司 全景图像的网络发布方法和系统及设备
CN107203965A (zh) * 2016-03-18 2017-09-26 中国科学院宁波材料技术与工程研究所 一种基于多通道图像融合的全景图像拼接方法
CN107203965B (zh) * 2016-03-18 2020-03-10 中国科学院宁波材料技术与工程研究所 一种基于多通道图像融合的全景图像拼接方法
TWI615810B (zh) * 2016-07-15 2018-02-21 信驊科技股份有限公司 具紋理映射功能的全景影像產生方法及裝置
WO2021185085A1 (zh) * 2020-03-20 2021-09-23 华为技术有限公司 一种显示方法及控制显示的装置
CN111491157A (zh) * 2020-04-21 2020-08-04 青岛联合创智科技有限公司 一种构建手机3d模型引导图像全面采集的方法

Also Published As

Publication number Publication date
CN105139336B (zh) 2018-06-22

Similar Documents

Publication Publication Date Title
US11703323B2 (en) Multi-channel depth estimation using census transforms
CN102821238B (zh) 宽视场超高分辨率成像系统
CN110663245B (zh) 用于存储成像数据的重叠区以产生优化拼接图像的设备及方法
US10425638B2 (en) Equipment and method for promptly performing calibration and verification of intrinsic and extrinsic parameters of a plurality of image capturing elements installed on electronic device
CN101673395B (zh) 图像拼接方法及装置
CN106331527B (zh) 一种图像拼接方法及装置
US9848184B2 (en) Stereoscopic display system using light field type data
CN104778656B (zh) 基于球面透视投影的鱼眼图像校正方法
CN102722080B (zh) 一种基于多镜头拍摄的多用途立体摄像方法
CN105139336A (zh) 一种多通道全景影像转换球幕鱼眼影片的方法
CN106157304A (zh) 一种基于多个相机的全景图拼接方法及系统
CN104618648A (zh) 一种全景视频拼接系统及拼接方法
CN106534670B (zh) 一种基于固联鱼眼镜头摄像机组的全景视频生成方法
US10057487B1 (en) Panoramic imaging systems based on normal-lens cameras
US11812009B2 (en) Generating virtual reality content via light fields
CN111866523B (zh) 全景视频合成方法、装置、电子设备和计算机存储介质
CN105809729A (zh) 一种虚拟场景的球形全景渲染方法
JP2010276433A (ja) 撮像装置、画像処理装置及び距離計測装置
CN108205799B (zh) 一种图像拼接方法及装置
CN111583117A (zh) 一种适用于太空复杂环境的快速全景拼接方法及装置
US11758101B2 (en) Restoration of the FOV of images for stereoscopic rendering
Popovic et al. State-of-the-art multi-camera systems
CN110728619B (zh) 一种全景图像拼接渲染方法及装置
Xu et al. Automatic panorama mosaicing with high distorted fisheye images
Zhang et al. A setup for panoramic stereo imaging

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant