CN108270951B

CN108270951B - 智能电子设备生成全景照片的方法及相应的智能电子设备

Info

Publication number: CN108270951B
Application number: CN201710549102.2A
Authority: CN
Inventors: 李丹
Original assignee: Individual
Current assignee: Li Dan
Priority date: 2017-07-07
Filing date: 2017-07-07
Publication date: 2021-07-30
Anticipated expiration: 2037-07-07
Also published as: CN108270951A

Abstract

本发明提供一种智能电子设备生成全景照片的方法及相应的智能电子设备，该方法包括：调取智能电子设备自带的前、后摄像头，同时进行前、后照片拍摄；根据智能电子设备的型号，调取预存的智能电子设备的前、后摄像头之间的相对位置信息，对所拍摄的前、后照片的位置进行校正；对校正后的前、后照片去除扭曲变形，将圆形拉伸为适于缝合的形状；对两张图片进行缝合，生成全景照片；在所述智能电子设备上对所生成的全景照片进行预览显示。本发明解决了智能电子设备不能实时处理显示所拍摄全景照片的问题，并充分利用智能电子设备原有的处理器功能，实现全景照片的合成处理。

Description

智能电子设备生成全景照片的方法及相应的智能电子设备

技术领域

本发明涉及全景照片处理技术领域，具体涉及一种智能电子设备生成全景照片的方法及相应的智能电子设备。

背景技术

现有的全景照片拍摄装置一般是独立于智能电子设备(例如手机、平板电脑或笔记本电脑)的单独的全景照片拍摄装置，单独的全景照片拍摄装置需要具备全景照片拍摄功能以及全景照片的图片处理功能，当拍摄装置连接到智能电子设备，将全景照片发送到智能电子设备上进行显示。

单独的全景照片拍摄装置需要具备拍摄和图片处理功能，没有利用智能电子设备自带的拍摄和图片处理功能，因此其结构较为复杂，成本较高，而且使用不方便。

而现有市面上一些运行在电脑、服务器或手机上的软件，可以将来自不同摄像镜头的图片转换为单个360度的全景照片，这些全景照片可以在浏览器、手机或虚拟现实的头戴装备上进行使用。但这并不是实时的解决方案，摄像镜头拍摄的照片需要转送给手机或电脑，然后进行后处理。

发明内容

本发明的特征和优点在下文的描述中部分地陈述，或者可从该描述显而易见，或者可通过实践本发明而学习。

为克服现有技术的问题，本发明提供一种智能电子设备生成全景照片的方法及相应的智能电子设备，解决了智能电子设备不能实时处理显示所拍摄全景照片的问题，并充分利用智能电子设备原有的处理器功能，实现全景照片的合成处理。

本发明解决上述技术问题所采用的技术方案如下：

根据本发明的一个方面，提供一种智能电子设备生成全景照片的方法，包括以下步骤：

a.调取智能电子设备自带的前、后摄像头，同时进行前、后照片拍摄；

b.根据智能电子设备的型号，调取预存的智能电子设备的前、后摄像头之间的相对位置信息，对所拍摄的前、后照片的位置进行校正；

c.对校正后的前、后照片去除扭曲变形，将圆形拉伸为适于缝合的形状；

d.对两张图片进行缝合，生成全景照片；

e.在智能电子设备上对所生成的全景照片进行预览显示。

本发明的智能电子设备可以包括手机、平板电脑或笔记本电脑。

根据本发明的一个实施例，可以在智能电子设备自带的前、后摄像头上分别套装鱼眼镜头，以增加前、后摄像头的广角，形成360度全景照片。

根据本发明的一个实施例，步骤b中，在对所拍摄的前、后照片的位置进行校正时,采用预定的圆形及其圆心分别找到所拍摄的前、后照片的中心和边缘，利用前、后摄像头之间的相对位置信息，修正前、后照片的圆心位置和/或相对角度位置。

根据本发明的一个实施例，步骤d中，在对两张拉伸为方形的图片进行缝合时，将其中的一张图片分割为两半，在分割处插入另一张图片，再对图片进行缝合。

根据本发明的一个实施例，步骤d中，在对图片进行缝合时将两张图片接触的线进行模糊化处理，并根据前、后镜头重叠的角度进行适当的去除重叠处理。

根据本发明的一个实施例，步骤d中，生成全景照片时，将麦克风采集的声音信号加入到缝合的照片中。

根据本发明的一个实施例，步骤e中，在智能电子设备上预览显示的为全景照片展开图、全景环形拼接图、或分屏显示的前、后照片平面图。

根据本发明的另一个方面，提供一种智能电子设备，包括：

摄像头调取模块，用于调取智能电子设备自带的前、后摄像头，同时进行前、后照片拍摄；

位置校正模块，用于根据智能电子设备的型号，调取预存的智能电子设备的前、后摄像头之间的相对位置信息，对所拍摄的前、后照片的位置进行校正；

照片处理模块，用于对定位后的前、后照片去除扭曲变形，将圆形拉伸为适于缝合的形状；

缝合模块，用于对两张图片进行缝合，生成全景照片；

预览显示模块，用于在智能电子设备上对所生成的全景照片进行预览显示。

根据本发明的一个实施例，还包括拼接模块，用于在缝合模块生成全景照片后，将麦克风采集的声音信号加入到缝合的照片中。

本发明提供了一种智能电子设备生成全景照片的方法及相应的智能电子设备，直接利用智能电子设备实时生成全景照片。

一方面，智能电子设备的软件可以直接调取智能电子设备自带的前、后摄像头，同时进行前、后照片拍摄；同时根据智能电子设备前、后摄像头之间的相对位置信息，对所拍摄的前、后照片的位置进行校正，这样可以不需要智能电子设备的前、后摄像头对准，可以方便地在手机等设备上实现全景照片拍摄；然后通过去除鱼眼扭曲变形并缝合，生成全景照片；并直接利用智能电子设备的显示模块对所生成的全景照片进行预览显示。解决了智能电子设备不能实时处理显示所拍摄全景照片的问题，并充分利用智能电子设备原有的处理器功能，实现全景照片的合成处理。

另一方面，在智能电子设备自带的前、后摄像头上仅仅需要分别套装鱼眼镜头(可以优选220度的广角镜头)这样便宜的小配件，而不需要使用额外的昂贵的全景照片拍摄装置，不需要额外的图像处理芯片，同样可以拍摄360度的全景照片，使用方便、灵活。当然，即便是没有鱼眼镜头的情况下，也能生成全景照片。直接利用智能电子设备的电源和处理系统，不仅可以适用于手机、平板电脑，也能在带有前后摄像头的笔记本电脑上直接使用。

通过对全景照片的处理，可以生成更加逼真的全景照片，而且可以将声音信号加入到全景照片中，更好地适用于全景视频的采集。

利用本发明，可以在智能电子设备上实时预览显示全景照片展开图、全景环形拼接图、或分屏显示的前、后照片平面图，极大地方便了全景照片或视频的拍摄。

本发明的全景照片可以通过例如无线方式实时分享到社交媒体、分享到视频直播平台、在陀螺运动中演示360度的图像和声音、或在虚拟现实装置中演示360度的图像和声音。本发明可与很多智能电子设备兼容，应用范围广。

通过阅读说明书，本领域普通技术人员将更好地了解这些技术方案的特征和内容。

附图说明

下面通过参考附图并结合实例具体地描述本发明，本发明的优点和实现方式将会更加明显，其中附图所示内容仅用于对本发明的解释说明，而不构成对本发明的任何意义上的限制，在附图中：

图1为根据本发明实施例在智能电子设备上套装鱼眼镜头的前、后和侧面示意图；

图2为本发明在智能电子设备生成全景照片的方法流程图；

图3为根据本发明实施例对前、后照片的位置进行校正的示意图；

图4为根据本发明实施例对前、后照片进行缝合的示意图；

图5为本发明智能电子设备模块结构示意图。

具体实施方式

本发明提供一种智能电子设备生成全景照片的方法，智能电子设备可以是手机、平板电脑或笔记本电脑等，在智能电子设备自带的前、后摄像头上分别套装鱼眼镜头，以增加前、后摄像头的广角，形成360度全景照片。当然，也可以利用智能电子设备自带的前、后摄像头直接进行拍摄。

如图1所示，前摄像头C1和后摄像头C2分别套装在智能手机上。前摄像头C1和后摄像头C2可以直接套装在智能手机的前、后摄像头上；也可以合为一体，利用一个支架套装在智能手机，并使前摄像头C1和后摄像头C2的位置与智能手机的前、后摄像头相对应。前摄像头C1和后摄像头C2采用鱼眼镜头，优选220度的广角镜头。

如图2所示，本发明包括以下步骤：

S1.调取智能电子设备自带的前、后摄像头，同时进行前、后照片拍摄；

S2.根据智能电子设备的型号，调取预存的智能电子设备的前、后摄像头之间的相对位置信息，对所拍摄的前、后照片的位置进行校正；

每个智能电子设备的前、后摄像头之间都有不同的位置，通过使用可视用户界面，可以定位一个圆和圆心，来找到图片的中心和边界。这些值存储起来，然后应用程序可以探测例如手机的型号并自动对每台设备调取正确的值来建立正确的图像。

具体地，如图3所示，在对所拍摄的前、后照片的位置进行校正时,可以采用预定的圆形及其圆心分别找到所拍摄的前、后照片的中心和边缘，利用前、后摄像头之间的相对位置信息，修正前、后照片的圆心位置和/或相对角度位置。

前、后摄像头之间在X轴、Y轴、R轴上的相对位置和角度上会存在差异，使得前后照片会存在重叠情况。修正后的前、后照片，可以通过压缩等方式形成相同直径的圆形，并且利用位置校正，克服了前、后摄像头之间在X轴、Y轴、R轴上相对位置和角度上的差异。这样，就可以相互配合形成一幅完整的全景图。

S3.对校正后的前、后照片去除扭曲变形，例如去除鱼眼扭曲变形，将圆形拉伸为适于缝合的形状，例如方形图片；

鱼眼镜头在摄取宽的视野上非常有效，但图片的扭曲却很严重，因此需要对鱼眼图片进行去除鱼眼扭曲变形。去除鱼眼扭曲变形用来将由鱼眼镜头摄取的照片去除扭曲变形，并转换为线性或圆柱投影。

S4.对两张图片进行缝合，生成全景照片；

具体地，如图4所示，在对两张方形图片进行缝合时，将其中的一张图片202分割为两半，在分割处插入另一张图片201，再对图片进行缝合。在对图片进行缝合时将两张方形图片接触的线进行模糊化处理，并可以根据前、后镜头重叠的角度进行适当的去除重叠处理。

当然，也可以将圆形拉伸为其它适于缝合的形状，并采用相适应的方法进行缝合。

在生成全景照片时，可以将麦克风采集的声音信号加入到缝合的照片中。

S5.在智能电子设备上对所生成的全景照片进行预览显示。

在智能电子设备上预览显示的为全景照片展开图、全景环形拼接图、或分屏显示的前、后照片平面图。

如图5所示，本发明同时提供一种智能电子设备，包括：

摄像头调取模块101，用于调取智能电子设备自带的前、后摄像头，同时进行前、后照片拍摄；

位置校正模块102，用于根据智能电子设备的型号，调取预存的智能电子设备的前、后摄像头之间的相对位置信息，对所拍摄的前、后照片的位置进行校正；

照片处理模块103，用于对定位后的前、后照片去除扭曲变形，将圆形拉伸为适于缝合的形状；

缝合模块104，用于对两张图片进行缝合，生成全景照片；

预览显示模块106，用于在智能电子设备上对所生成的全景照片进行预览显示。

本发明还包括拼接模块105，用于在缝合模块生成全景照片后，将麦克风采集的声音信号加入到缝合的照片中。

本发明提供了一种智能电子设备生成全景照片的方法及相应的智能电子设备，直接利用智能电子设备实时生成全景照片。仅仅只需要两个摄像头就可以工作，而且不需要前后摄像头对准并保持在对齐的位置。

以上参照附图说明了本发明的优选实施例，本领域技术人员不脱离本发明的范围和实质，可以有多种变型方案实现本发明。举例而言，作为一个实施例的部分示出或描述的特征可用于另一实施例以得到又一实施例。以上仅为本发明较佳可行的实施例而已，并非因此局限本发明的权利范围，凡运用本发明说明书及附图内容所作的等效变化，均包含于本发明的权利范围之内。

Claims

1.一种智能电子设备生成全景照片的方法，其特征在于包括以下步骤：

d.对两张图片进行缝合，生成全景照片；

e.在所述智能电子设备上对所生成的全景照片进行预览显示；

所述步骤b中，在对所拍摄的前、后照片的位置进行校正时,采用预定的圆形及其圆心分别找到所拍摄的前、后照片的中心和边缘，利用前、后摄像头之间的相对位置信息，修正前、后照片的圆心位置和/或相对角度位置。

2.根据权利要求1所述的智能电子设备生成全景照片的方法，其特征在于，所述智能电子设备包括手机、平板电脑或笔记本电脑。

3.根据权利要求1所述的智能电子设备生成全景照片的方法，其特征在于，在所述智能电子设备自带的前、后摄像头上分别套装鱼眼镜头，以增加前、后摄像头的广角，形成360度全景照片。

4.根据权利要求1所述的智能电子设备生成全景照片的方法，其特征在于，所述步骤d中，在对两张拉伸为方形的图片进行缝合时，将其中的一张图片分割为两半，在分割处插入另一张图片，再对图片进行缝合。

5.根据权利要求1所述的智能电子设备生成全景照片的方法，其特征在于，所述步骤d中，在对图片进行缝合时将两张图片接触的线进行模糊化处理，并根据前、后镜头重叠的角度进行适当的去除重叠处理。

6.根据权利要求1所述的智能电子设备生成全景照片的方法，其特征在于，所述步骤d中，生成全景照片时，将麦克风采集的声音信号加入到缝合的照片中。

7.根据权利要求1所述的智能电子设备生成全景照片的方法，其特征在于，所述步骤e中，在所述智能电子设备上预览显示的为全景照片展开图、全景环形拼接图、或分屏显示的前、后照片平面图。

8.一种智能电子设备，其特征在于包括：

位置校正模块，用于根据智能电子设备的型号，调取预存的智能电子设备的前、后摄像头之间的相对位置信息，对所拍摄的前、后照片的位置进行校正；在对所拍摄的前、后照片的位置进行校正时,采用预定的圆形及其圆心分别找到所拍摄的前、后照片的中心和边缘，利用前、后摄像头之间的相对位置信息，修正前、后照片的圆心位置和/或相对角度位置；

缝合模块，用于对两张图片进行缝合，生成全景照片；

预览显示模块，用于在所述智能电子设备上对所生成的全景照片进行预览显示。

9.根据权利要求8所述的智能电子设备，其特征在于，还包括拼接模块，用于在所述缝合模块生成全景照片后，将麦克风采集的声音信号加入到缝合的照片中。