CN104243851A - 图像生成方法和电子设备 - Google Patents
图像生成方法和电子设备 Download PDFInfo
- Publication number
- CN104243851A CN104243851A CN201410510592.1A CN201410510592A CN104243851A CN 104243851 A CN104243851 A CN 104243851A CN 201410510592 A CN201410510592 A CN 201410510592A CN 104243851 A CN104243851 A CN 104243851A
- Authority
- CN
- China
- Prior art keywords
- image
- composograph
- coded treatment
- generate
- coding
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Abstract
本发明提供一种图像生成方法和电子设备。该图像生成方法包括：在第一方向上顺序地获取用于生成全景图像的多个图像；在每获取一个图像之后，将获取的图像与之前获得的图像合成，以生成合成图像；确定生成的合成图像中需要进行编码处理的部分，并且对其执行第一编码处理以生成用于合成图像的第一编码数据；以及在所述合成图像的编码处理完成之后，根据预定算法确定最终的合成图像中的目标图像区域作为全景图像，并从获得的全部第一编码数据中获得与所述目标图像区域相对应的第一编码数据作为用于全景图像的第二编码数据。
Description
技术领域
本发明涉及电子设备的领域，更具体地，本发明涉及图像生成方法和电子设备。
背景技术
目前，在进行全景图像的拍照处理时，通常是在拍照完成后，才进行JPEG编码。由于全景照片的尺寸非常大，对生成的全景照片执行编码处理会造成等待JPEG编码处理的压缩时间非常长，这使得用户使用体验较差。
为此，期望提供一种图像生成方法和电子设备，其能够有效地缩短全景拍照的时间，提高用户的使用体验。
发明内容
根据本发明的一个实施例，提供了一种图像生成方法，包括：
在第一方向上顺序地获取用于生成全景图像的多个图像；
在每获取一个图像之后，将获取的图像与之前获得的图像合成，以生成合成图像；
确定生成的合成图像中需要进行编码处理的部分，并且对其执行第一编码处理以生成用于合成图像的第一编码数据；以及
在所述合成图像的编码处理完成之后，根据预定算法确定最终的合成图像中的目标图像区域作为全景图像，并从获得的全部第一编码数据中获得与所述目标图像区域相对应的第一编码数据作为用于全景图像的第二编码数据。
优选地，在每获取一个图像之后，将该图像与之前获得的图像合成，以生成合成图像包括：
在第一方向上，在获取第二个图像之后，将该第二个图像与第一个图像按照预定拼接算法进行拼接，从而生成合成图像；以及
在获取随后的每一个图像之后，将每个图像与之前获得的合成图像按照预定拼接算法进行拼接，从而生成更新的合成图像。
优选地，第一编码处理是JPEG编码处理，并且确定生成的合成图像中需要进行编码处理的部分，并且对其执行第一编码处理以生成用于合成图像的第一编码数据还包括：
确定生成的合成图像中需要进行编码处理的部分；
以预定单位大小将确定需要进行编码的部分划分为多个图像块；
以与所述第一方向垂直的第二方向上的相邻两个图像块为基础，顺序地对确定需要进行编码的部分进行编码处理，直到完成需要进行编码的部分的第一编码处理。
优选地，确定生成的合成图像中需要进行编码处理的部分还包括：
根据所述预定拼接算法，确定生成的合成图像中要与随后获取的图像进行合成时的叠加部分的大小；
确定生成的合成图像减去所述叠加部分作为要进行编码处理的部分。
优选地，所述图像生成方法还包括：
根据确定的目标图像区域的图像参数，对所述第二编码数据执行头文件处理以生成编码后的全景图像文件。
优选地，所述图像生成方法还包括：
在在第一方向上顺序地获取用于生成全景图像的多个图像之前，确定与所述第一方向垂直的第二方向上的所述多个图像的最大偏移范围。
优选地，在每获取一个图像之后，将该图像与之前获得的图像合成，以生成合成图像包括：
在第一方向上，在获取第二个图像之后，将该第二个图像与第一个图像按照预定拼接算法进行拼接，从而生成合成图像；以及
在获取随后的每一个图像之后，将每个图像与之前获得的合成图像按照预定拼接算法进行拼接，从而生成更新的合成图像。
优选地，第一编码处理是JPEG编码处理，并且确定生成的合成图像中需要进行编码处理的部分，并且对其执行第一编码处理以生成用于合成图像的第一编码数据还包括：
确定生成的合成图像中需要进行编码处理的部分；
以预定单位大小将确定需要进行编码的部分划分为多个图像块；
以与所述第一方向垂直的第二方向上的相邻两个图像块为基础，顺序地对确定需要进行编码的部分进行编码处理，直到完成需要进行编码的部分的第一编码处理。
优选地，确定生成的合成图像中需要进行编码处理的部分还包括：
根据确定的最大偏移范围，确定合成图像中在第二方向上的偏移部分；
根据所述预定拼接算法，确定生成的合成图像中在第一方向上要与随后获取的图像进行合成时的叠加部分的大小；
确定生成的合成图像减去所述偏移部分和所述叠加部分作为要进行编码处理的部分。
优选地，所述图像生成方法还包括：
根据确定的目标图像区域的图像参数，对所述第二编码数据执行头文件处理以生成编码后的全景图像文件。
优选地，在第一方向上顺序地获取用于生成全景图像的多个图像还包括：
在第一方向上以相同焦距获取顺序地获取用于生成全景图像的多个图像。
根据本发明另一实施例，提供了一种电子设备，包括：
图像获取单元，用于在第一方向上顺序地获取用于生成全景图像的多个图像；
合成单元，用于在每获取一个图像之后，将获取的图像与之前获得的图像合成，以生成合成图像；
编码单元，用于在确定生成的合成图像中需要进行编码处理的部分，并且对其执行第一编码处理以生成用于合成图像的第一编码数据，并且在所述合成图像的编码处理完成之后，根据预定算法确定最终的合成图像中的目标图像区域作为全景图像，并从获得的全部第一编码数据中获得与所述目标图像区域相对应的第一编码数据作为用于全景图像的第二编码数据。
优选地，所述合成单元进一步用于：
在第一方向上，在获取第二个图像之后，将该第二个图像与第一个图像按照预定拼接算法进行拼接，从而生成合成图像；以及
在获取随后的每一个图像之后，将每个图像与之前获得的合成图像按照预定拼接算法进行拼接，从而生成更新的合成图像。
优选地，第一编码处理是JPEG编码处理，并且所述编码单元进一步用于：
确定生成的合成图像中需要进行编码处理的部分；
以预定单位大小将确定需要进行编码的部分划分为多个图像块；
以与所述第一方向垂直的第二方向上的相邻两个图像块为基础，顺序地对确定需要进行编码的部分进行编码处理，直到完成需要进行编码的部分的第一编码处理。
优选地，所述编码单元进一步用于：
根据所述预定拼接算法，确定生成的合成图像中要与随后获取的图像进行合成时的叠加部分的大小；
确定生成的合成图像减去所述叠加部分作为要进行编码处理的部分。
优选地，所述编码单元进一步用于：
根据确定的目标图像区域的图像参数，对所述第二编码数据执行头文件处理以生成编码后的全景图像文件。
优选地，所述电子设备还包括：
偏移确定单元，用于在在第一方向上顺序地获取用于生成全景图像的多个图像之前，确定与所述第一方向垂直的第二方向上的所述多个图像的最大偏移范围。
优选地，所述编码单元进一步用于：
在第一方向上，在获取第二个图像之后，将该第二个图像与第一个图像按照预定拼接算法进行拼接，从而生成合成图像；以及
在获取随后的每一个图像之后，将每个图像与之前获得的合成图像按照预定拼接算法进行拼接，从而生成更新的合成图像。
优选地，第一编码处理是JPEG编码处理，并且确定生成的合成图像中需要进行编码处理的部分，并且所述编码单元进一步用于：
确定生成的合成图像中需要进行编码处理的部分；
以预定单位大小将确定需要进行编码的部分划分为多个图像块；
以与所述第一方向垂直的第二方向上的相邻两个图像块为基础，顺序地对确定需要进行编码的部分进行编码处理，直到完成需要进行编码的部分的第一编码处理。
优选地，所述编码单元进一步用于：
确定生成的合成图像中的之前获得的图像的边界；
对合成图像的图像数据执行纵向编码，直到到达确定的之前图像的边界；
顺序地编码合成图像的未编码图像数据，直到完成合成图像的图像数据的第一编码处理。
优选地，所述编码单元进一步用于：
根据确定的目标图像区域的图像参数，对所述第二编码数据执行头文件处理以生成编码后的全景图像文件。
优选地，所述图像获取单元进一步用于：
在第一方向上以相同焦距获取顺序地获取用于生成全景图像的多个图像。
因此，根据本发明实施例的图像生成方法和电子设备，能够在拍照的同时进行图像编码，从而有效地缩短全景拍照的时间，提高用户的使用体验。
附图说明
图1A、1B和1C是说明JPEG编码以及本申请中采用的纵向编码的基本原理的示意图；
图2是说明根据本发明第一实施例的图像生成方法的流程图；
图3是说明根据本发明第一实施例的图像生成方法的说明图；
图4是说明根据本发明第二实施例的图像生成方法的流程图；
图5是说明根据本发明第二实施例的图像生成方法的说明图；
图6是说明根据本发明第三实施例的电子设备的功能配置框图；以及
图7是说明根据本发明第四实施例的电子设备的功能配置框图。
具体实施方式
下面，将参考附图详细描述根据本发明实施例的图像生成方法和电子设备。根据本发明实施例的图像生成方法应用于电子设备，该电子设备可以是任何电子设备，只要该电子设备包括图像获取单元并且能够处理获取的图像数据以生成全景图像。这样的电子设备的例子例如包括照相机、带有摄像头的智能手机、带有摄像头的平板电脑等等。
在描述根据本发明实施例的图像生成方法之前，首先简单地描述JPEG编码的原理。
JPEG是联合图象专家组(Joint Picture Expert Group)的英文缩写，是国际标准化组织(ISO)和CCITT联合制定的静态图象的压缩编码标准。和相同图象质量的其它常用文件格式(如GIF，TIFF，PCX)相比，JPEG是目前静态图象中压缩比最高的。正是由于JPEG的高压缩比，使得它广泛地应用于多媒体和网络程序中，例如HTML语法中选用的图象格式之一就是JPEG(另一种是GIF)。这是显然的，因为网络的带宽非常宝贵，选用一种高压缩比的文件格式是十分必要的。
如1A所示，JPEG编码主要分为以下几个步骤：
A.将原始图像分为8*8的小块,每个小块里有64像素；
B.将图像中每个8*8的小块进行DCT变换；
C.量化；
D.编码。
因为JPEG编码原理是本领域技术人员所熟知的，在此并详细描述。
在编码阶段中，编码信息分两类，一类是每个8*8小块中的左上角F[0,0]位置上元素，这是DC(直流分量)，代表8*8个小块的平均值，JPEG中对F[0,0]单独编码。因为在一幅图像中像素之间的灰度或色差信号变化缓慢，相邻的8×8块之间有更强的相关性，所以两个相邻的8×8小块的DC系数相差很小，所以对它们采用差分编码DPCM，可以提高压缩比，也就是说，对相邻小块的DC系数的差值进行编码。
另外，如图1B所示，在现有技术中，通常采用的方式是进行横向编码，也就是说，以横向方向上相邻的两个小块为基础进行编码。JPEG算法采用了差分脉冲编码调制(DPCM)技术，对相邻图像块之间量化DC系数的差值进行编码。ΔDCi＝DCi-DCi-1。
然而，这样的编码方式在生成全景图像的过程中是不利的，因为需要等到用于生成全景图像的全部图像拍摄完成确定了全景图像的水平边界后，才能进行JPEG编码。由于全景照片的尺寸非常大，对生成的全景照片执行编码处理会造成等待JPEG编码处理的压缩时间非常长。
为此，本申请中采用纵向编码方式。如图1C所示，本申请中以纵向方向上相邻的两个小块为基础进行编码。ΔDCj＝DCj-DCj-1。对于用于生成全景图像的多个图像来说，每个图像在纵向方向上的图像高度是可以确定的，因此，在每获取一个图像之后，立即可以对图像开始JPEG编码处理。
<第一实施例>
如图2所示，根据本发明实施例的图像生成方法100可以应用于包括图像获取单元的电子设备。
该方法100包括：
步骤S101：在第一方向上顺序地获取用于生成全景图像的多个图像；
步骤S102：在每获取一个图像之后，将获取的图像与之前获得的图像合成，以生成合成图像；
步骤S103：确定生成的合成图像中需要进行编码处理的部分，并且对其执行第一编码处理以生成用于合成图像的第一编码数据；
步骤S104：在所述合成图像的编码处理完成之后，根据预定算法确定最终的合成图像中的目标图像区域作为全景图像，并从获得的全部第一编码数据中获得与所述目标图像区域相对应的第一编码数据作为用于全景图像的第二编码数据。
具体来说，在步骤S101中，利用电子设备的图像获取单元在第一方向上顺序地获取用于生成全景图像的多个图像。例如，可以利用诸如三脚架的固定装置，将电子设备固定。然后，在水平方向上摇动预定范围，顺序地获取多个图像以用于生成全景图像。
在一个实施例中，可以在第一方向上以相同焦距获取顺序地获取用于生成全景图像的多个图像。
然后，在步骤S102中，在每获取一个图像之后，将获取的图像与之前获得的图像合成，以生成合成图像。
具体来说，在第一方向(例如，水平方向)上，在获取第二个图像之后，将该第二个图像与第一个图像按照预定拼接算法进行拼接，从而生成合成图像。然后，在获取第三个图像之后，可以将该第三个图像与之前生成的合成图像按照预定拼接算法进行拼接，从而生成更新的合成图像。按照这样的方式，在获取随后的每一个图像之后，将获取的图像与之前获得的合成图像按照预定拼接算法进行拼接，从而生成更新的合成图像。
需要注意的是，拼接多个图像以生成全景图像的拼接算法是本领域技术人员熟知的，在此省略其详细描述。
然后，在步骤S103中，确定生成的合成图像中需要进行编码处理的部分，并且对其执行第一编码处理以生成用于合成图像的第一编码数据。
具体来说，与现有技术中需要等待最终的全景图像生成以后才开始编码处理不同，根据本发明的图像生成方法在每次获取一张用于生成全景图像的图像之后，立即与之前获得的合成图像进行合成，并且对生成的合成图像立即开始编码。
显然，例如，当第二个图像与第一个图像合成之后，就已经可以开始合成图像的编码。然后，当合成第三个图像之后，不需要从头开始合成图像的编码，而只需要编码新合成的部分图像内容。
因此，在步骤S103中，每一次生成更新的合成图像之后，就确定更新的合成图像中需要编码的部分，并且开始编码。
然后，在步骤S104中，在所述合成图像的编码处理完成之后，根据预定算法确定最终的合成图像中的目标图像区域作为全景图像，并从获得的全部第一编码数据中获得与所述目标图像区域相对应的第一编码数据作为用于全景图像的第二编码数据。
具体来说，在用于生成合成图像的多个图像全部合成并且编码处理完成之后，此时可以根据预定算法(例如，全景图像拼接算法)从生成的合成图像中裁剪出期望的图像区域作为全景图像。然后，可以从获得的全部第一编码数据中对应地去除不必要的8*8或者16*16小块的编码数据，从而获得与所述目标图像区域相对应的第一编码数据作为用于全景图像的第二编码数据。
在另一个实施例中，可选地，在步骤S105完成之后，可以根据确定的目标图像区域的图像参数，对所述第二编码数据执行头文件处理以生成编码后的全景图像文件。
具体地，例如根据诸如裁剪后的图像尺寸等图像参数，对第二编码数据执行头文件的处理，从而生成最终的编码后的全景图像文件。
在本申请中，例如采用JPEG编码方式。因此，第一编码处理是JPEG编码处理。JPEG的头文件中例如包括图像高度、图像宽度、数据精度、编码方式、量化表等等。在此省略其详细描述。
下面，参考图3描述根据本发明第一实施例的图像生成方法的具体过程。
如图3所示，图像获取单元顺序地获取第一、第二、第三、……、第n个图像。然后，将第二图像与第一图像合成。将第三图像与第一、第二图像的合成图像合成。类似地，将第四图像与之前获得的合成图像合成，直到最后完成全部图像的合成。在第一图像和第二图像合成之后，确定生成的合成图像中需要进行编码处理的部分。例如，此时确定需要编码的部分为第一个图像和第二个图像的合成图像。需要注意的是，因为第二个图像在后面要与第三个图像进行合成处理，因此不需要对该合成图像的全部进行编码，而是需要减去该合成图像要与第三个图像叠加的部分作为需要进行编码处理的部分，该叠加的部分可以根据预定拼接算法确定。也就是说，在该实施例中，可以根据所述预定拼接算法，确定生成的合成图像中要与随后获取的图像进行合成时的叠加部分的大小，然后确定生成的合成图像减去所述叠加部分作为要进行编码处理的部分。由此，可以减少叠加部分的无效编码，从而减少编码量，提高编码处理速度。
类似地，当第三图像与之前获得的合成图像合成之后，确定更新的合成图像中需要进行编码处理的部分。该需要编码处理的部分为第二次合成后的叠加部分以及第三个图像中减去要与第四个图像叠加的部分。以此类推，直到最后获得的合成图像中的未编码部分作为要编码的部分。
在确定需要编码处理的部分之后，以预定单位大小(例如，8*8的小块或16*16的小块)将确定需要进行编码的部分划分为多个图像块。
然后，以与所述第一方向垂直的第二方向(垂直方向)上的相邻两个图像块为基础，顺序地对确定需要进行编码的部分进行编码处理，直到完成需要进行编码的部分的第一编码处理。需要注意的是，当第一列从上进行编码处理到达第一列的底部时，以第一列的底部的图像块和第二列的底部的图像块为基础，在水平方向上进行编码处理。然后，从第二列开始，在垂直方向上从下往上以相邻两个图像块为基础，顺序地编码第二列的图像块。以此类推，当第二列从下往上进行编码处理到达第二列的顶部时，以第二列的顶部的图像块和第三列的顶部的图像块为基础，在水平方向上进行编码处理。然后，从第三列开始，在垂直方向上从上往下以相邻两个图像块为基础，顺序地编码第三列的图像块。类似地，直到完成全部需要进行编码的部分的编码处理。
在本发明中，纵向编码实际上是以一种S形的纵向编码进行编码处理，直到完成需要进行编码的部分的第一编码处理。
在本申请中，该编码处理是基于JPEG处理的原理，但是与现有的JPEG编码中以水平方向上的两个相邻图像块为基础进行水平编码的方式不同，本申请中主要以垂直方向上的两个相邻图像块为基础，以S形的纵向编码进行JPEG编码。
然后，从最后生成的合成图像中，根据例如全景图像拼接算法裁剪出相应的目标图像区域作为全景图像。如图3所示，该目标图像区域小于或等于最终获得的合成图像。相应地，从获得的全部第一编码数据中获得与所述目标图像区域相对应的第一编码数据作为用于全景图像的第二编码数据。
这样的好处是因为垂直方向上的图像宽度是固定的或者已知的，因此，在每获取一个图像之后，立即可以开始编码处理。通过对合成图像进行这样的纵向编码，可以在拍照获得新的图像的同时进行已经合成图像的编码，从而大大缩短获得全景图像的时间。
因此，根据本发明第一实施例的图像生成方法，能够在拍照的同时进行图像编码，从而有效地缩短全景拍照的时间，提高用户的使用体验。
<第二实施例>
下面参考图4和图5描述根据本发明第二实施例的图像生成方法。
如图4所示，根据本发明实施例的图像生成方法200可以应用于包括图像获取单元的电子设备。
该方法200包括：
步骤S201：确定用于生成全景图像的多个图像在第二方向上的最大偏移范围；
步骤S201：在第一方向上顺序地获取用于生成全景图像的多个图像，第一方向与第二方向垂直；
步骤S203：在每获取一个图像之后，将获取的图像与之前获得的图像合成，以生成合成图像；
步骤S204：检测获取的每个图像的偏移量，根据该偏移量确定生成的合成图像中需要进行编码处理的部分，并且对其执行第一编码处理以生成用于合成图像的第一编码数据；
步骤S205：在所述合成图像的编码处理完成之后，根据预定算法确定最终的合成图像中的目标图像区域作为全景图像，并从获得的全部第一编码数据中获得与所述目标图像区域相对应的第一编码数据作为用于全景图像的第二编码数据。
具体来说，在步骤S201中，在开始获取用于生成全景图像的多个图像之前，首先定义全景拍照的最大移动范围，也就是说，与获取多个图像的方向垂直的方向上的最大偏移量，例如，可以先定义最大偏移量为图像高度的10％，也就是说，以第一个图像为基准，后面获取的图像相对于第一个图像最大可以在垂直方向上偏移10％。因为这样的偏移将影响导致后面的图像拼接处理。另外，需要为此分配对应的内存。
在一个实施例中，可以在第一方向上以相同焦距获取顺序地获取用于生成全景图像的多个图像。
在定义了最大偏移范围之后，在步骤S202中，开始利用电子设备的图像获取单元在第一方向上顺序地获取用于生成全景图像的多个图像。例如，可以利用诸如三脚架的固定装置，将电子设备固定。然后，在水平方向上摇动预定范围，顺序地获取多个图像以用于生成全景图像。
然后，在步骤S203中，在每获取一个图像之后，将获取的图像与之前获得的图像合成，以生成合成图像。
具体来说，在第一方向(例如，水平方向)上，在获取第二个图像之后，将该第二个图像与第一个图像按照预定拼接算法进行拼接，从而生成合成图像。然后，在获取第三个图像之后，可以将该第三个图像与之前生成的合成图像按照预定拼接算法进行拼接，从而生成更新的合成图像。按照这样的方式，在获取随后的每一个图像之后，将获取的图像与之前获得的合成图像按照预定拼接算法进行拼接，从而生成更新的合成图像。
然后，在步骤S204中，检测获取的每个图像的偏移量，根据该偏移量确定生成的合成图像中需要进行编码处理的部分，并且对其执行第一编码处理以生成用于合成图像的第一编码数据。
具体来说，与根据第一实施例的图像生成方法不同，根据第二实施例的图像生成方法在确定需要编码处理的部分时，首先检测获取的每个图像相对于基准图像(第一个图像)的偏移量，并且根据该偏移量确定生成的合成图像中需要进行编码处理的部分。
如图5所示，假设第二个图像相对于第一个图像上移10％，并且第三个图像相对于第一个图像下移10％。
因此，在步骤S204中，在获取第二个图像之后，首先检测第二个图像相对于第一个图像上移10％，此时，可以确定第一个图像的下部10％和第二个图像的上部10％是不需要编码的数据。因为在最终生成的全景图像中，为了生成包括所有图像内容的完整的画面，第一个图像的下部10％部分和第二个图像的上部10％部分将被裁剪。
然后，在获取第三个图像之后，首先检测第三个图像相对于第一个图像下移10％，此时，可以确定第三个图像的合成图像的下部20％是不需要编码的数据。因为在最终生成的全景图像中，为了生成包括所有图像内容的完整的画面，第三个图像的下部20％部分将被裁剪。
因此，通过检测后面获取的图像相对于基准图像的偏移量，可以确定在最终图像中将被裁剪的部分是不需要编码的部分。也就是说，检测后面获取的图像相对于基准图像的偏移量，可以检测在最终全景图像中有用的有效图像区域，从而大大地减少编码量，进一步缩短图像文件的编码时间。
然后，因为第二个图像在后面要与第三个图像进行合成处理，因此不需要对该合成图像的全部进行编码，而是需要减去该合成图像要与第三个图像叠加的部分作为需要进行编码处理的部分，该叠加的部分可以根据预定拼接算法确定。也就是说，在该实施例中，可以根据所述预定拼接算法，确定生成的合成图像中要与随后获取的图像进行合成时的叠加部分的大小，然后确定生成的合成图像减去所述叠加部分作为要进行编码处理的部分。由此，可以减少叠加部分的无效编码，从而减少编码量，提高编码处理速度。
因此，在本发明第二实施例中，在合成图像中，根据确定的最大偏移范围，确定合成图像中在第二方向上的偏移部分，然后根据预定拼接算法，确定生成的合成图像中在第一方向上要与随后获取的图像进行合成时的叠加部分的大小，最后确定生成的合成图像减去所述偏移部分和所述叠加部分作为要进行编码处理的部分。
此外，第二实施例的图像生成方法的步骤S205与第一实施例中的步骤S104相同，在此省略其详细描述。
然后，在另一个实施例中，在步骤S205之后，可以根据确定的目标图像区域的图像参数，对所述第二编码数据执行头文件处理以生成编码后的全景图像文件。
因此，根据本发明第二实施例的图像生成方法，能够在拍照的同时进行图像编码，并且通过检测图像的偏移量确定有效图像区域，减少了所需的编码工作量，从而进一步有效地缩短全景拍照的时间，提高用户的使用体验。
<第三实施例>
下面将参考图6描述根据本发明第三实施例的电子设备600。
该电子设备600包括：
图像获取单元601，用于在第一方向上顺序地获取用于生成全景图像的多个图像；
合成单元602，用于在每获取一个图像之后，将获取的图像与之前获得的图像合成，以生成合成图像；
编码单元603，用于在确定生成的合成图像中需要进行编码处理的部分，并且对其执行第一编码处理以生成用于合成图像的第一编码数据，并且在所述合成图像的编码处理完成之后，根据预定算法确定最终的合成图像中的目标图像区域作为全景图像，并从获得的全部第一编码数据中获得与所述目标图像区域相对应的第一编码数据作为用于全景图像的第二编码数据。
优选地，所述合成单元602进一步用于：
在第一方向上，在获取第二个图像之后，将该第二个图像与第一个图像按照预定拼接算法进行拼接，从而生成合成图像；以及
在获取随后的每一个图像之后，将每个图像与之前获得的合成图像按照预定拼接算法进行拼接，从而生成更新的合成图像。
优选地，第一编码处理是JPEG编码处理，并且所述编码单元603进一步用于：
确定生成的合成图像中需要进行编码处理的部分；
以预定单位大小将确定需要进行编码的部分划分为多个图像块；
以与所述第一方向垂直的第二方向上的相邻两个图像块为基础，顺序地对确定需要进行编码的部分进行编码处理，直到完成需要进行编码的部分的第一编码处理。
优选地，所述编码单元603进一步用于：
根据所述预定拼接算法，确定生成的合成图像中要与随后获取的图像进行合成时的叠加部分的大小；
确定生成的合成图像减去所述叠加部分作为要进行编码处理的部分。
优选地，所述编码单元603进一步用于：
根据确定的目标图像区域的图像参数，对所述第二编码数据执行头文件处理以生成编码后的全景图像文件。
在一个实施例中，图像获取单元601可以在第一方向上以相同焦距获取顺序地获取用于生成全景图像的多个图像。
需要注意的是，该电子设备600的各个功能单元执行根据第一实施例的方法的各个对应步骤，在此省略其详细描述。
另外，在图示根据各个实施例的电子设备时仅仅示出了其功能单元，并没有具体描述各个功能单元的连接关系，本领域技术人员可以理解的是，各个功能单元可以通过总线、内部连接线等等适当地连接，这样的连接对于本领域技术人员来说是熟知的。
因此，根据本发明第三实施例的电子设备，能够在拍照的同时进行图像编码，从而有效地缩短全景拍照的时间，提高用户的使用体验。
<第四实施例>
下面将参考图7描述根据本发明第四实施例的电子设备700。
该电子设备700包括：
偏移确定单元701，用于确定用于生成全景图像的多个图像在第二方向上的最大偏移范围；
图像获取单元702，用于在第一方向上顺序地获取用于生成全景图像的多个图像；
合成单元703，用于在每获取一个图像之后，将获取的图像与之前获得的图像合成，以生成合成图像；
编码单元704，用于检测获取的每个图像的偏移量，根据该偏移量确定生成的合成图像中需要进行编码处理的部分，并且对其执行第一编码处理以生成用于合成图像的第一编码数据，并从获得的全部第一编码数据中获得与所述目标图像区域相对应的第一编码数据作为用于全景图像的第二编码数据。
优选地，所述合成单元703进一步用于：
在第一方向上，在获取第二个图像之后，将该第二个图像与第一个图像按照预定拼接算法进行拼接，从而生成合成图像；以及
在获取随后的每一个图像之后，将每个图像与之前获得的合成图像按照预定拼接算法进行拼接，从而生成更新的合成图像。
优选地，第一编码处理是JPEG编码处理，并且所述编码单元704进一步用于：
确定生成的合成图像中需要进行编码处理的部分；
以预定单位大小将确定需要进行编码的部分划分为多个图像块；
以与所述第一方向垂直的第二方向上的相邻两个图像块为基础，顺序地对确定需要进行编码的部分进行编码处理，直到完成需要进行编码的部分的第一编码处理。
优选地，所述编码单元704进一步用于：
根据确定的最大偏移范围，确定合成图像中在第二方向上的偏移部分；
根据所述预定拼接算法，确定生成的合成图像中在第一方向上要与随后获取的图像进行合成时的叠加部分的大小；
确定生成的合成图像减去所述偏移部分和所述叠加部分作为要进行编码处理的部分。
优选地，所述编码单元704进一步用于：
根据确定的目标图像区域的图像参数，对所述第二编码数据执行头文件处理以生成编码后的全景图像文件。
在一个实施例中，图像获取单元702可以在第一方向上以相同焦距获取顺序地获取用于生成全景图像的多个图像。
需要注意的是，该电子设备700的各个功能单元执行根据第一实施例的方法的各个对应步骤，在此省略其详细描述。
另外，在图示根据各个实施例的电子设备时仅仅示出了其功能单元，并没有具体描述各个功能单元的连接关系，本领域技术人员可以理解的是，各个功能单元可以通过总线、内部连接线等等适当地连接，这样的连接对于本领域技术人员来说是熟知的。
因此，根据本发明第四实施例的电子设备，能够在拍照的同时进行图像编码，并且通过检测图像的偏移量确定有效图像区域，减少了所需的编码工作量，从而进一步有效地缩短全景拍照的时间，提高用户的使用体验。
需要说明的是，在本说明书中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
最后，还需要说明的是，上述一系列处理不仅包括以这里所述的顺序按时间序列执行的处理，而且包括并行或分别地、而不是按时间顺序执行的处理。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到本发明可借助软件加必需的硬件平台的方式来实现，当然也可以全部通过硬件来实施。基于这样的理解，本发明的技术方案对背景技术做出贡献的全部或者部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
以上对本发明进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。
Claims (22)
1.一种图像生成方法，包括：
在第一方向上顺序地获取用于生成全景图像的多个图像；
在每获取一个图像之后，将获取的图像与之前获得的图像合成，以生成合成图像；
确定生成的合成图像中需要进行编码处理的部分，并且对其执行第一编码处理以生成用于合成图像的第一编码数据；以及
在所述合成图像的编码处理完成之后，根据预定算法确定最终的合成图像中的目标图像区域作为全景图像，并从获得的全部第一编码数据中获得与所述目标图像区域相对应的第一编码数据作为用于全景图像的第二编码数据。
2.如权利要求1所述的方法，其中，在每获取一个图像之后，将该图像与之前获得的图像合成，以生成合成图像包括：
在第一方向上，在获取第二个图像之后，将该第二个图像与第一个图像按照预定拼接算法进行拼接，从而生成合成图像；以及
在获取随后的每一个图像之后，将每个图像与之前获得的合成图像按照预定拼接算法进行拼接，从而生成更新的合成图像。
3.如权利要求2所述的方法，其中，第一编码处理是JPEG编码处理，并且确定生成的合成图像中需要进行编码处理的部分，并且对其执行第一编码处理以生成用于合成图像的第一编码数据还包括：
确定生成的合成图像中需要进行编码处理的部分；
以预定单位大小将确定需要进行编码的部分划分为多个图像块；
以与所述第一方向垂直的第二方向上的相邻两个图像块为基础，顺序地对确定需要进行编码的部分进行编码处理，直到完成需要进行编码的部分的第一编码处理。
4.如权利要求3所述的方法，其中，确定生成的合成图像中需要进行编码处理的部分还包括：
根据所述预定拼接算法，确定生成的合成图像中要与随后获取的图像进行合成时的叠加部分的大小；
确定生成的合成图像减去所述叠加部分作为要进行编码处理的部分。
5.如权利要求4所述的方法，还包括：
根据确定的目标图像区域的图像参数，对所述第二编码数据执行头文件处理以生成编码后的全景图像文件。
6.如权利要求1所述的方法，还包括：
在在第一方向上顺序地获取用于生成全景图像的多个图像之前，确定与所述第一方向垂直的第二方向上的所述多个图像的最大偏移范围。
7.如权利要求6所述的方法，其中，在每获取一个图像之后，将该图像与之前获得的图像合成，以生成合成图像包括：
在第一方向上，在获取第二个图像之后，将该第二个图像与第一个图像按照预定拼接算法进行拼接，从而生成合成图像；以及
在获取随后的每一个图像之后，将每个图像与之前获得的合成图像按照预定拼接算法进行拼接，从而生成更新的合成图像。
8.如权利要求7所述的方法，其中，第一编码处理是JPEG编码处理，并且确定生成的合成图像中需要进行编码处理的部分，并且对其执行第一编码处理以生成用于合成图像的第一编码数据还包括：
确定生成的合成图像中需要进行编码处理的部分；
以预定单位大小将确定需要进行编码的部分划分为多个图像块；
以与所述第一方向垂直的第二方向上的相邻两个图像块为基础，顺序地对确定需要进行编码的部分进行编码处理，直到完成需要进行编码的部分的第一编码处理。
9.如权利要求8所述的方法，其中，确定生成的合成图像中需要进行编码处理的部分还包括：
根据确定的最大偏移范围，确定合成图像中在第二方向上的偏移部分；
根据所述预定拼接算法，确定生成的合成图像中在第一方向上要与随后获取的图像进行合成时的叠加部分的大小；
确定生成的合成图像减去所述偏移部分和所述叠加部分作为要进行编码处理的部分。
10.如权利要求9所述的方法，还包括：
根据确定的目标图像区域的图像参数，对所述第二编码数据执行头文件处理以生成编码后的全景图像文件。
11.如权利要求1所述的方法，其中，在第一方向上顺序地获取用于生成全景图像的多个图像还包括：
在第一方向上以相同焦距获取顺序地获取用于生成全景图像的多个图像。
12.一种电子设备，包括：
图像获取单元，用于在第一方向上顺序地获取用于生成全景图像的多个图像；
合成单元，用于在每获取一个图像之后，将获取的图像与之前获得的图像合成，以生成合成图像；
编码单元，用于在确定生成的合成图像中需要进行编码处理的部分，并且对其执行第一编码处理以生成用于合成图像的第一编码数据，并且在所述合成图像的编码处理完成之后，根据预定算法确定最终的合成图像中的目标图像区域作为全景图像，并从获得的全部第一编码数据中获得与所述目标图像区域相对应的第一编码数据作为用于全景图像的第二编码数据。
13.如权利要求12所述的电子设备，其中，所述合成单元进一步用于：
在第一方向上，在获取第二个图像之后，将该第二个图像与第一个图像按照预定拼接算法进行拼接，从而生成合成图像；以及
在获取随后的每一个图像之后，将每个图像与之前获得的合成图像按照预定拼接算法进行拼接，从而生成更新的合成图像。
14.如权利要求13所述的电子设备，其中，第一编码处理是JPEG编码处理，并且所述编码单元进一步用于：
确定生成的合成图像中需要进行编码处理的部分；
以预定单位大小将确定需要进行编码的部分划分为多个图像块；
以与所述第一方向垂直的第二方向上的相邻两个图像块为基础，顺序地对确定需要进行编码的部分进行编码处理，直到完成需要进行编码的部分的第一编码处理。
15.如权利要求14所述的电子设备，其中，所述编码单元进一步用于：
根据所述预定拼接算法，确定生成的合成图像中要与随后获取的图像进行合成时的叠加部分的大小；
确定生成的合成图像减去所述叠加部分作为要进行编码处理的部分。
16.如权利要求15所述的电子设备，其中，所述编码单元进一步用于：
根据确定的目标图像区域的图像参数，对所述第二编码数据执行头文件处理以生成编码后的全景图像文件。
17.如权利要求12所述的电子设备，还包括：
偏移确定单元，用于在在第一方向上顺序地获取用于生成全景图像的多个图像之前，确定与所述第一方向垂直的第二方向上的所述多个图像的最大偏移范围。
18.如权利要求17所述的电子设备，其中，所述编码单元进一步用于：
在第一方向上，在获取第二个图像之后，将该第二个图像与第一个图像按照预定拼接算法进行拼接，从而生成合成图像；以及
在获取随后的每一个图像之后，将每个图像与之前获得的合成图像按照预定拼接算法进行拼接，从而生成更新的合成图像。
19.如权利要求18所述的电子设备，其中，第一编码处理是JPEG编码处理，并且确定生成的合成图像中需要进行编码处理的部分，并且所述编码单元进一步用于：
确定生成的合成图像中需要进行编码处理的部分；
以预定单位大小将确定需要进行编码的部分划分为多个图像块；
以与所述第一方向垂直的第二方向上的相邻两个图像块为基础，顺序地对确定需要进行编码的部分进行编码处理，直到完成需要进行编码的部分的第一编码处理。
20.如权利要求19所述的电子设备，其中，所述编码单元进一步用于：
根据确定的最大偏移范围，确定合成图像中在第二方向上的偏移部分；
根据所述预定拼接算法，确定生成的合成图像中在第一方向上要与随后获取的图像进行合成时的叠加部分的大小；
确定生成的合成图像减去所述偏移部分和所述叠加部分作为要进行编码处理的部分。
21.如权利要求20所述的电子设备，其中，所述编码单元进一步用于：
根据确定的目标图像区域的图像参数，对所述第二编码数据执行头文件处理以生成编码后的全景图像文件。
22.如权利要求12所述的电子设备，其中，所述图像获取单元进一步用于：
在第一方向上以相同焦距获取顺序地获取用于生成全景图像的多个图像。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410510592.1A CN104243851B (zh) | 2014-09-28 | 2014-09-28 | 图像生成方法和电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410510592.1A CN104243851B (zh) | 2014-09-28 | 2014-09-28 | 图像生成方法和电子设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN104243851A true CN104243851A (zh) | 2014-12-24 |
| CN104243851B CN104243851B (zh) | 2017-11-03 |
Family
ID=52231103
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201410510592.1A Active CN104243851B (zh) | 2014-09-28 | 2014-09-28 | 图像生成方法和电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104243851B (zh) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20040065014A (ko) * | 2003-01-13 | 2004-07-21 | 전자부품연구원 | 다시점 영상의 압축/복원장치 및 방법 |
| CN101084675A (zh) * | 2004-10-12 | 2007-12-05 | 韩国电子通信研究院 | 利用图像拼接来编码和解码多视点视频的方法和设备 |
| CN101562706A (zh) * | 2009-05-22 | 2009-10-21 | 杭州华三通信技术有限公司 | 一种图像拼接方法和设备 |
| CN101588451A (zh) * | 2008-05-20 | 2009-11-25 | 索尼株式会社 | 图像拾取设备和方法、再现控制设备和方法、及程序 |
| CN103179401A (zh) * | 2013-03-19 | 2013-06-26 | 燕山大学 | 多智能体协同视频采集与图像信息拼接处理方法及装置 |
-
2014
- 2014-09-28 CN CN201410510592.1A patent/CN104243851B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20040065014A (ko) * | 2003-01-13 | 2004-07-21 | 전자부품연구원 | 다시점 영상의 압축/복원장치 및 방법 |
| CN101084675A (zh) * | 2004-10-12 | 2007-12-05 | 韩国电子通信研究院 | 利用图像拼接来编码和解码多视点视频的方法和设备 |
| CN101588451A (zh) * | 2008-05-20 | 2009-11-25 | 索尼株式会社 | 图像拾取设备和方法、再现控制设备和方法、及程序 |
| CN101562706A (zh) * | 2009-05-22 | 2009-10-21 | 杭州华三通信技术有限公司 | 一种图像拼接方法和设备 |
| CN103179401A (zh) * | 2013-03-19 | 2013-06-26 | 燕山大学 | 多智能体协同视频采集与图像信息拼接处理方法及装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN104243851B (zh) | 2017-11-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7266686B2 (ja) | 点群圧縮のための方法、装置、およびコンピュータプログラム | |
| US10158870B2 (en) | Method and apparatus for processing motion compensation of a plurality of frames | |
| KR101210625B1 (ko) | 빈공간 채움 방법 및 이를 수행하는 3차원 비디오 시스템 | |
| EP2161686A2 (en) | Method and apparatus for providing higher resolution images in an embedded device | |
| JP2016502332A (ja) | 次世代動画用コンテンツに適応的な特性補償済み予測 | |
| US11109071B2 (en) | Method and apparatus for dynamic point cloud partition packing | |
| WO2008020734A1 (en) | A method and apparatus for encoding or decoding frames of different views in multiview video using global disparity | |
| KR20180049028A (ko) | 광 필드 기반 이미지를 인코딩 및 디코딩하기 위한 방법과 디바이스, 및 대응하는 컴퓨터 프로그램 제품 | |
| US11711535B2 (en) | Video-based point cloud compression model to world signaling information | |
| WO2020181434A1 (en) | Parameter set signaling in digital video | |
| CN104081780A (zh) | 图像处理装置和图像处理方法 | |
| US11838519B2 (en) | Image encoding/decoding method and apparatus for signaling image feature information, and method for transmitting bitstream | |
| US20220038721A1 (en) | Cross-component quantization in video coding | |
| US20210097724A1 (en) | Adaptive Depth Guard Band | |
| RU2625526C2 (ru) | Способ и устройство для обработки видеосигнала | |
| JP7247349B2 (ja) | イントラ予測のための成分間線形モデリングの方法、装置、デコーダ、エンコーダ、およびプログラム | |
| Jeong et al. | VVC subpicture-based frame packing for MPEG immersive video | |
| CN114391259A (zh) | 信息处理方法、终端设备及存储介质 | |
| JP2020120322A (ja) | 距離画像符号化装置およびそのプログラム、ならびに、距離画像復号装置およびそのプログラム | |
| CN104243851A (zh) | 图像生成方法和电子设备 | |
| JP7416820B2 (ja) | ビデオコーディングにおけるヌルタイルコーディング | |
| Radosavljevic et al. | Implementation of film-grain technology within VVC | |
| CN114175644A (zh) | 使用色度量化参数表的图像解码方法及其设备 | |
| EP3203742A1 (en) | System and method for encoding and decoding information representative of a focalization distance associated to an image belonging to a focal stack representative of a light field content | |
| EP4199516A1 (en) | Reduction of redundant data in immersive video coding |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |