CN108550110B - 一种基于raw图像的全景拼接方法、装置及电子设备 - Google Patents
一种基于raw图像的全景拼接方法、装置及电子设备 Download PDFInfo
- Publication number
- CN108550110B CN108550110B CN201810240844.1A CN201810240844A CN108550110B CN 108550110 B CN108550110 B CN 108550110B CN 201810240844 A CN201810240844 A CN 201810240844A CN 108550110 B CN108550110 B CN 108550110B
- Authority
- CN
- China
- Prior art keywords
- image
- panoramic
- raw
- raw format
- format
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 29
- 238000004590 computer program Methods 0.000 claims description 15
- 238000000354 decomposition reaction Methods 0.000 claims description 5
- 238000012805 post-processing Methods 0.000 abstract description 10
- 238000010586 diagram Methods 0.000 description 4
- 239000003086 colorant Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4015—Image demosaicing, e.g. colour filter arrays [CFA] or Bayer patterns
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4007—Scaling of whole images or parts thereof, e.g. expanding or contracting based on interpolation, e.g. bilinear interpolation
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
Abstract
本发明提供了一种基于RAW图像的全景拼接方法、装置及电子设备，该方法包括：获取至少两个RAW图像；将每个RAW图像按颜色通道分解为R图像、G图像和B图像；将所述R图像、G图像和B图像分别拼接为全景R图像、全景G图像和全景B图像；根据RAW格式的R、G、B数据排列，索引对应全景R图像、全景G图像、全景B图像上的像素值，从而得到拼接好的RAW格式全景图像。可见，本发明可以得到RAW的全景图像，使得图像后期处理有更大的空间，避免了基于RGB图像的全景拼接在后期处理方面会有较大限制的问题。
Description
技术领域
本发明属于全景图像领域，尤其涉及一种基于RAW图像的全景拼接方法、装置及电子设备。
背景技术
随着科技的发展，全景图像的应用越来越普及，全景图像能提供360度的全景图，带给用户一种身临其境的感受。
RAW图像就是CMOS或者CCD图像感应器将捕捉到的光源信号转化为数字信号的原始数据，是未经处理的。相比之下，RGB图像是经过有损压缩处理的，图像细节比RAW图像的细节少很多。故RAW图像在后期处理，例如加减曝光，调整高光\阴影，增减对比度，调整色阶和曲线等有更大的优势。
但是，目前的全景图像一般是基于RGB图像拼接而成，可见，基于RGB图像的全景拼接在后期处理方面会有较大的限制。
发明内容
本发明的目的在于提供一种基于RAW图像的全景拼接方法、装置、计算机可读存储介质及电子设备，旨在解决基于RGB图像的全景拼接在后期处理方面会有较大限制的问题。
第一方面，本发明提供了一种基于RAW图像的全景拼接方法，其特征在于，所述方法包括：
获取至少两个RAW图像；
将每个RAW图像按颜色通道分解为R图像、G图像和B图像；
将所述R图像、G图像和B图像分别拼接为全景R图像、全景G图像和全景B图像；
根据RAW格式的R、G、B数据排列，索引对应全景R图像、全景G图像、全景B图像上的像素值，从而得到拼接好的RAW格式全景图像。
第二方面，本发明提供了一种基于RAW图像的全景拼接装置，其特征在于，所述装置包括：
获取模块，用于获取至少两个RAW图像；
分解模块，用于将每个RAW图像按颜色通道分解为R图像、G图像和B图像；
拼接模块，用于将所述R图像、G图像和B图像分别拼接为全景R图像、全景G图像和全景B图像；
所述拼接模块还用于根据RAW格式的R、G、B数据排列，索引对应全景R图像、全景G图像、全景B图像上的像素值，从而得到拼接好的RAW格式全景图像。
第三方面，本发明提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如上述的基于RAW图像的全景拼接方法的步骤。
第四方面，本发明提供了一种一种电子设备，包括：一个或多个处理器；存储器；以及一个或多个计算机程序，其中所述一个或多个计算机程序被存储在所述存储器中，并且被配置成由所述一个或多个处理器执行，其特征在于，所述处理器执行所述计算机程序时实现如上述的基于RAW图像的全景拼接方法的步骤。
在本发明中，通过获取至少两个RAW图像；将每个RAW图像按颜色通道分解为R图像、G图像和B图像；将所述R图像、G图像和B图像分别拼接为全景R图像、全景G图像和全景B图像；所述拼接模块还用于根据RAW格式的R、G、B数据排列，索引对应全景R图像、全景G图像、全景B图像上的像素值，从而得到拼接好的RAW格式全景图像。可见，本发明可以得到RAW的全景图像，使得图像后期处理有更大的空间，避免了基于RGB图像的全景拼接在后期处理方面会有较大限制的问题。
附图说明
图1是本发明实施例一提供的基于RAW图像的全景拼接方法的流程图。
图2是本发明实施例一提供的分解RAW图像的示例图。
图3是本发明实施例二提供的基于RAW图像的全景拼接装置的功能模块框图。
图4是本发明实施例四提供的电子设备的具体结构框图。
具体实施方式
为了使本发明的目的、技术方案及有益效果更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
为了说明本发明所述的技术方案，下面通过具体实施例来进行说明。
实施例一：
请参阅图1，本发明实施例一提供的基于RAW图像的全景拼接方法包括以下步骤：需注意的是，若有实质上相同的结果，本发明的基于RAW图像的全景拼接方法并不以图1所示的流程顺序为限。
S101、获取至少两个RAW图像；
全景图像的一种获取方法是将一系列的具有重叠区域的照片，拼接成全景图像，所以全景图像的拼接，至少需要获取两个RAW图像。
RAW图像就是CMOS或者CCD图像感应器将捕捉到的光源信号转化为数字信号的原始数据。RAW图像是一种记录了数码相机传感器的原始信息，同时记录了由相机拍摄所产生的一些元数据(Metadata，如ISO的设置、快门速度、光圈值、白平衡等)的文件。所以在图像的后期处理中，RAW相比其他格式有更大的处理空间。
S102、将每个RAW图像按颜色通道分解为R图像、G图像和B图像；
RAW图像一个像素就只有一个颜色通道,或R通道或G通道或B通道。由于一个像素点只有一种颜色通道,分解时需要借助这个像素点周围的颜色进行插值(填充)。以GR/BG格式的RAW图像为例，R图像、G图像、B图像的分解方式如图2所示。可以理解的是，图2仅为RAW图像分解为R图像、G图像、B图像的一个示例，并不用于限定本发明。
还需要说明的是，R图像、G图像、B图像的位数和RAW数据一致。位数就是图像的像素，由步骤S101获取的RAW图像是多少位的，则由该RAW图像分解出的R图像、G图像和B图像就是多少位的。
S103、将所述R图像、G图像和B图像分别拼接为全景R图像、全景G图像和全景B图像；
具体的，将用于拼接为全景图像的至少两个RAW图像，各自分解的R图像拼接为全景R图像，各自分解的G图像拼接为全景G图像，各自分解的B图像拼接为全景B图像。
还需要说明的是，可以先获取每个所述RAW图像的内参、外参和畸变参数，再根据所述内参、外参和畸变参数，将所述R图像、G图像和B图像分别拼接为全景R图像、全景G图像和全景B图像。
S104、根据RAW格式的R、G、B数据排列，索引对应全景R图像、全景G图像、全景B图像上的像素值，从而得到拼接好的RAW格式全景图像。
具体的，根据RAW格式的R、G、B数据排列，在所述全景R图像中索引RAW格式中R通道的值，在所述全景G图像中索引RAW格式中G通道的值，在所述全景B图像中索引RAW格式中B通道的值，从而拼接成RAW格式的全景图像。
在本发明中，通过获取至少两个RAW图像；将每个RAW图像按颜色通道分解为R图像、G图像和B图像；将所述R图像、G图像和B图像分别拼接为全景R图像、全景G图像和全景B图像；根据RAW格式的R、G、B数据排列，索引对应全景R图像、全景G图像、全景B图像上的像素值，从而得到拼接好的RAW格式全景图像。可见，本发明可以得到RAW的全景图像，使得图像后期处理有更大的空间，避免了基于RGB图像的全景拼接在后期处理方面会有较大限制的问题。
实施例二：
请参阅图3，本发明实施例二提供的基于RAW图像的全景拼接装置包括：
获取模块301，用于获取至少两个RAW图像；
分解模块302，用于将每个RAW图像按颜色通道分解为R图像、G图像和B图像；
拼接模块303，用于将所述R图像、G图像和B图像分别拼接为全景R图像、全景G图像和全景B图像；还用于根据RAW格式的R、G、B数据排列，索引对应全景R图像、全景G图像、全景B图像上的像素值，从而得到拼接好的RAW格式全景图像。
进一步的，所述获取模块还用于获取每个所述RAW图像的内参、外参和畸变参数；所述拼接模块用于将所述R图像、G图像和B图像分别拼接为全景R图像、全景G图像和全景B图像具体为：根据所述内参、外参和畸变参数，将所述R图像、G图像和B图像分别拼接为全景R图像、全景G图像和全景B图像。
进一步的，所述拼接模块还用于根据RAW格式的R、G、B数据排列，索引对应全景R图像、全景G图像、全景B图像上的像素值，从而得到拼接好的RAW格式全景图像具体为：根据RAW格式的R、G、B数据排列，在所述全景R图像中索引RAW格式中R通道的值，在所述全景G图像中索引RAW格式中G通道的值，在所述全景B图像中索引RAW格式中B通道的值，从而得到拼接好的RAW格式全景图像。
进一步的，所述R图像、G图像和B图像的位数和RAW数据的一致。
本发明实施例二提供的基于RAW图像的全景拼接装置及本发明实施例一提供的基于RAW图像的全景拼接方法属于同一构思，其具体实现过程详见说明书全文，此处不再赘述。
实施例三：
本发明实施例三提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如本发明实施例一提供的基于RAW图像的全景拼接方法的步骤。
实施例四：
图4示出了本发明实施例四提供的电子设备的具体结构框图，一种电子设备100包括：一个或多个处理器101、存储器102、以及一个或多个计算机程序，其中所述处理器101和所述存储器102通过总线连接，所述一个或多个计算机程序被存储在所述存储器102中，并且被配置成由所述一个或多个处理器101执行，所述处理器101执行所述计算机程序时实现如本发明实施例一提供的基于RAW图像的全景拼接方法的步骤。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：只读存储器(ROM，Read Only Memory)、随机存取记忆体(RAM，RandomAccess Memory)、磁盘或光盘等。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。
Claims (8)
1.一种基于RAW图像的全景拼接方法，其特征在于，所述方法包括：
获取至少两个RAW图像，获取每个所述RAW图像的内参、外参和畸变参数；
将每个RAW图像按颜色通道分解为R图像、G图像和B图像；
根据所述内参、外参和畸变参数，将所述R图像、G图像和B图像分别拼接为全景R图像、全景G图像和全景B图像；
根据RAW格式的R、G、B数据排列，索引对应全景R图像、全景G图像、全景B图像上的像素值，从而得到拼接好的RAW格式全景图像。
2.如权利要求1所述的方法，其特征在于，所述根据RAW格式的R、G、B数据排列，索引对应全景R图像、全景G图像、全景B图像上的像素值，从而得到拼接好的RAW格式全景图像包括：
根据RAW格式的R、G、B数据排列，在所述全景R图像中索引RAW格式中R通道的值，在所述全景G图像中索引RAW格式中G通道的值，在所述全景B图像中索引RAW格式中B通道的值，从而得到拼接好的RAW格式全景图像。
3.如权利要求1或2所述的方法，其特征在于，所述R图像、G图像和B图像的位数和RAW数据的一致。
4.一种基于RAW图像的全景拼接装置，其特征在于，所述装置包括：
获取模块，用于获取至少两个RAW图像，获取每个所述RAW图像的内参、外参和畸变参数；
分解模块，用于将每个RAW图像按颜色通道分解为R图像、G图像和B图像；
拼接模块，用于根据所述内参、外参和畸变参数，将所述R图像、G图像和B图像分别拼接为全景R图像、全景G图像和全景B图像；
所述拼接模块还用于根据RAW格式的R、G、B数据排列，索引对应全景R图像、全景G图像、全景B图像上的像素值，从而得到拼接好的RAW格式全景图像。
5.如权利要求4所述的装置，其特征在于，所述拼接模块还用于根据RAW格式的R、G、B数据排列，索引对应全景R图像、全景G图像、全景B图像上的像素值，从而得到拼接好的RAW格式全景图像具体为：
根据RAW格式的R、G、B数据排列，在所述全景R图像中索引RAW格式中R通道的值，在所述全景G图像中索引RAW格式中G通道的值，在所述全景B图像中索引RAW格式中B通道的值，从而得到拼接好的RAW格式全景图像。
6.如权利要求4或5所述的装置，其特征在于，所述R图像、G图像和B图像的位数和RAW数据的一致。
7.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至3任一项所述的基于RAW图像的全景拼接方法的步骤。
8.一种电子设备，包括：一个或多个处理器；存储器；以及一个或多个计算机程序，其中所述一个或多个计算机程序被存储在所述存储器中，并且被配置成由所述一个或多个处理器执行，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至3任一项所述的基于RAW图像的全景拼接方法的步骤。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810240844.1A CN108550110B (zh) | 2018-03-22 | 2018-03-22 | 一种基于raw图像的全景拼接方法、装置及电子设备 |
| PCT/CN2019/072504 WO2019179230A1 (zh) | 2018-03-22 | 2019-01-21 | 一种基于raw图像的全景拼接方法及电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810240844.1A CN108550110B (zh) | 2018-03-22 | 2018-03-22 | 一种基于raw图像的全景拼接方法、装置及电子设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN108550110A CN108550110A (zh) | 2018-09-18 |
| CN108550110B true CN108550110B (zh) | 2021-03-02 |
Family
ID=63516726
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201810240844.1A Active CN108550110B (zh) | 2018-03-22 | 2018-03-22 | 一种基于raw图像的全景拼接方法、装置及电子设备 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN108550110B (zh) |
| WO (1) | WO2019179230A1 (zh) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108550110B (zh) * | 2018-03-22 | 2021-03-02 | 影石创新科技股份有限公司 | 一种基于raw图像的全景拼接方法、装置及电子设备 |
| CN114697550A (zh) * | 2022-03-24 | 2022-07-01 | 湖南网景文化科技有限公司 | LivePanoVR全景嵌入视频素材合成高清VR全景视频的制作方法 |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7095905B1 (en) * | 2000-09-08 | 2006-08-22 | Adobe Systems Incorporated | Merging images to form a panoramic image |
| US7103236B2 (en) * | 2001-08-28 | 2006-09-05 | Adobe Systems Incorporated | Methods and apparatus for shifting perspective in a composite image |
| US8355042B2 (en) * | 2008-10-16 | 2013-01-15 | Spatial Cam Llc | Controller in a camera for creating a panoramic image |
| CN102957871A (zh) * | 2012-11-06 | 2013-03-06 | 广东欧珀移动通信有限公司 | 一种移动终端拍摄图片的景深处理方法 |
| CN107203965B (zh) * | 2016-03-18 | 2020-03-10 | 中国科学院宁波材料技术与工程研究所 | 一种基于多通道图像融合的全景图像拼接方法 |
| CN106204427A (zh) * | 2016-07-07 | 2016-12-07 | 上海杰图软件技术有限公司 | 一种基于Bayer图像生成全景图像的方法和系统 |
| CN106447632B (zh) * | 2016-09-23 | 2019-04-02 | 西北工业大学 | 一种基于稀疏表示的raw图像去噪方法 |
| CN107369129B (zh) * | 2017-06-26 | 2020-01-21 | 深圳岚锋创视网络科技有限公司 | 一种全景图像的拼接方法、装置及便携式终端 |
| CN108550110B (zh) * | 2018-03-22 | 2021-03-02 | 影石创新科技股份有限公司 | 一种基于raw图像的全景拼接方法、装置及电子设备 |
-
2018
- 2018-03-22 CN CN201810240844.1A patent/CN108550110B/zh active Active
-
2019
- 2019-01-21 WO PCT/CN2019/072504 patent/WO2019179230A1/zh active Application Filing
Non-Patent Citations (1)
| Title |
|---|
| RAW格式图像处理技巧例解57 Lightroom6版功能新发展的补充介绍;韩程伟;《照相机》;20160901(第9期);第58-62页 * |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2019179230A1 (zh) | 2019-09-26 |
| CN108550110A (zh) | 2018-09-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106210501B (zh) | 图像合成方法与图像处理装置 | |
| US8675980B2 (en) | Method and system for reducing update frequency of image-processing means | |
| US10270988B2 (en) | Method for generating high-dynamic range image, camera device, terminal and imaging method | |
| JP6397284B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
| Andriani et al. | Beyond the Kodak image set: A new reference set of color image sequences | |
| JP2011004353A (ja) | 画像処理装置、画像処理方法 | |
| US8675984B2 (en) | Merging multiple exposed images in transform domain | |
| EP2617008A1 (en) | A multi frame image processing apparatus | |
| US20180183988A1 (en) | Image processing device, image processing method, imaging device, and storage medium | |
| CN109479111A (zh) | 图像处理装置、再生装置、图像处理方法以及再生方法 | |
| CN108550110B (zh) | 一种基于raw图像的全景拼接方法、装置及电子设备 | |
| US20150036020A1 (en) | Method for sharing original photos along with final processed image | |
| US20160088266A1 (en) | Automatic image color correciton using an extended imager | |
| WO2023010751A1 (zh) | 图像高亮区域的信息补偿方法、装置、设备及存储介质 | |
| CN111327827A (zh) | 拍摄场景识别控制方法、装置及拍摄设备 | |
| US20100079582A1 (en) | Method and System for Capturing and Using Automatic Focus Information | |
| EP2421239B1 (en) | Image processing apparatus and method for applying film grain effects | |
| CN115706870B (zh) | 视频处理方法、装置、电子设备和存储介质 | |
| CN105100587B (zh) | 摄像装置及其控制方法 | |
| CN110689502B (zh) | 一种图像处理方法及相关装置 | |
| CN1809123A (zh) | 摄像装置 | |
| CN115835034A (zh) | 白平衡处理方法与电子设备 | |
| CN113781322A (zh) | 一种色域映射方法、装置、终端设备及存储介质 | |
| CN111416937A (zh) | 图像处理方法、装置、存储介质及移动设备 | |
| KR101731695B1 (ko) | 시간적 일관성을 유지하는 다시점 이미지의 색상 왜곡 보정 방법 및 장치 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information | ||
| CB02 | Change of applicant information |
Address after: 518000 Guangdong, Shenzhen, Baoan District Xin'an street, Hai Xiu Road 23, 6 A 601603605, long Kong Century Towers, 601603605 Applicant after: Yingshi Innovation Technology Co., Ltd Address before: 518000 Guangdong, Shenzhen, Baoan District Xin'an street, Hai Xiu Road 23, 6 A 601603605, long Kong Century Towers, 601603605 Applicant before: SHENZHEN ARASHI VISION Co.,Ltd. |
|
| GR01 | Patent grant | ||
| GR01 | Patent grant |