CN110611768B - 多重曝光摄影方法及装置 - Google Patents

多重曝光摄影方法及装置 Download PDF

Info

Publication number
CN110611768B
CN110611768B CN201910923409.3A CN201910923409A CN110611768B CN 110611768 B CN110611768 B CN 110611768B CN 201910923409 A CN201910923409 A CN 201910923409A CN 110611768 B CN110611768 B CN 110611768B
Authority
CN
China
Prior art keywords
touch screen
screen operation
image
main body
multiple exposure
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910923409.3A
Other languages
English (en)
Other versions
CN110611768A (zh
Inventor
常冰琳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN201910923409.3A priority Critical patent/CN110611768B/zh
Publication of CN110611768A publication Critical patent/CN110611768A/zh
Priority to US16/744,698 priority patent/US11146742B2/en
Priority to EP20153132.4A priority patent/EP3799414A1/en
Application granted granted Critical
Publication of CN110611768B publication Critical patent/CN110611768B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621—Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration by the use of more than one image, e.g. averaging, subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/743—Bracketing, i.e. taking a series of images with varying exposure conditions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2625—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of images from a temporal image sequence, e.g. for a stroboscopic effect
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20084—Artificial neural networks [ANN]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20092—Interactive image processing based on input by user
    • G06T2207/20104—Interactive definition of region of interest [ROI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging

Abstract

本公开是关于一种多重曝光摄影方法及装置，涉及多重曝光摄影技术。本公开提供的一种多重曝光摄影方法，包括：接收触屏操作，确定触屏操作对应的采集帧，触屏操作对应的主体区域图像，以及触屏操作对应的主体区域图像的对齐参数；实时获取当前采集帧；将触屏操作对应的主体区域图像，或者将触屏操作对应的主体区域图像以及所有历史触屏操作对应的主体区域图像，根据相应的对齐参数合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；将最后一次触屏操作后生成的一个多重曝光处理效果图像作为多重曝光结果图像。本实施例技术方案，可以实时进行图像合成操作并显示多重曝光处理效果，这种直观的实时预览功能，提高了用户体验。

Description

多重曝光摄影方法及装置
技术领域
本公开涉及多重曝光摄影技术，尤其涉及一种多重曝光摄影方法及装置。
背景技术
相关技术中，数码相机的多重曝光功能，实际上是通过一定的方法，将多张照片实时合成为一张照片的过程。例如，可以将人物主体轮廓与其他背景合成，达到特殊的艺术效果。图1所示即为第一种应用场景下进行多重曝光处理后的一张合成照片。或者，合成照片的背景相同，但主体有多个，且主体所在位置有变化，达到同一张照片中有相同的人的多个分身的趣味效果。
对于合成处理方式，采用简单的按固定比例相加合成。具体地，连续拍摄多张照片，拍摄的多张照片中的背景相同；预览时简单的将多张没有对齐的照片平均合成展示；所有照片拍摄完成后，离线对齐所有照片；根据照片的差值大小来判断画面主体所在的区域，单独提取主体合成最终结果，得到多重曝光摄影照片。
从上述过程的描述可以看出，相关技术中的多重曝光摄影在预览时，需要所有照片拍摄完成后将多张照片平均合成。
发明内容
为克服相关技术中存在的问题，本公开提供一种多重曝光摄影方法及装置。
根据本公开实施例的第一方面，提供一种多重曝光摄影方法，包括：
接收触屏操作，确定所述触屏操作对应的采集帧，按照第一规则从所述触屏操作对应的采集帧中确定所述触屏操作对应的主体区域图像，按照第二规则确定所述触屏操作对应的主体区域图像的对齐参数；
实时获取当前采集帧；
当所述触屏操作为首次接收的触屏操作时，将所述触屏操作对应的主体区域图像根据所述触屏操作对应的主体区域图像的对齐参数，合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
当所述触屏操作为非首次接收的触屏操作时，将所述触屏操作对应的主体区域图像以及所有历史触屏操作对应的主体区域图像，根据相应的对齐参数合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
从最后一次触屏操作后生成的多重曝光处理效果图像中确定一个多重曝光处理效果图像作为多重曝光结果图像。
可选地，上述方法中，所述第一规则包括：
根据所述触屏操作和/或对象图像分割方法确定所述触屏操作对应的主体区域图像。
可选地，上述方法中，所述根据所述触屏操作和对象图像分割方法确定所述触屏操作对应的主体区域图像，包括：
在所述触屏操作对应的采集帧中，确定所述触屏操作对应的图像区域；
将所述图像区域包括的位置信息和图像信息，输入至深度神经网络；
通过所述深度神经网络从所述图像区域中识别出的主体区域图像。
可选地，上述方法中，所述第二规则包括：
按照预先配置的对齐参数确定所述触屏操作对应的主体区域图像的对齐参数；或者
按照预先配置的对齐算法，将实时获取的当前采集帧与所述触屏操作对应的采集帧进行对齐计算，得到所述触屏操作对应的主体区域图像的对齐参数；或者
按照预先配置的对齐算法，将实时获取的当前采集帧与历史触屏操作对应的采集帧进行对齐计算，得到所述触屏操作对应的主体区域图像的对齐参数。
可选地，上述方法还包括：
接收针对任意一个或多个历史触屏操作对应的主体区域图像发起的编辑操作；
根据所述编辑操作对相应的主体区域图像进行处理，将处理后的图像作为更新后的多重曝光处理效果图像并显示。
可选地，上述方法中，所述编辑操作至少包括：
修改主体区域图像操作和/或删除主体区域图像操作。
根据本公开实施例的第二方面，提供一种多重曝光摄影装置，包括：
第一模块，用于接收触屏操作，确定所述触屏操作对应的采集帧，按照第一规则从所述触屏操作对应的采集帧中确定所述触屏操作对应的主体区域图像，按照第二规则确定所述触屏操作对应的主体区域图像的对齐参数；
第二模块，用于实时获取当前采集帧；
第三模块，用于在所述触屏操作为首次接收的触屏操作时，将所述触屏操作对应的主体区域图像根据所述触屏操作对应的主体区域图像的对齐参数，合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
第四模块，用于在所述触屏操作为非首次接收的触屏操作时，将所述触屏操作对应的主体区域图像以及所有历史触屏操作对应的主体区域图像，根据相应的对齐参数合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
第五模块，用于从最后一次触屏操作后生成的多重曝光处理效果图像中确定一个多重曝光处理效果图像作为多重曝光结果图像。
可选地，上述装置中，所述第一规则包括：
根据所述触屏操作和/或对象图像分割方法确定所述触屏操作对应的主体区域图像。
可选地，上述装置中，所述第一模块，包括：
第一子模块，用于在所述触屏操作对应的采集帧中，确定所述触屏操作对应的图像区域；
第二子模块，用于将所述图像区域包括的位置信息和图像信息，输入至深度神经网络；
第三子模块，用于通过所述深度神经网络从所述图像区域中识别出的主体区域图像。
可选地，上述装置中，所述第二规则包括：
按照预先配置的对齐参数确定所述触屏操作对应的主体区域图像的对齐参数；或者
按照预先配置的对齐算法，将实时获取的当前采集帧与所述触屏操作对应的采集帧进行对齐计算，得到所述触屏操作对应的主体区域图像的对齐参数；或者
按照预先配置的对齐算法，将实时获取的当前采集帧与历史触屏操作对应的采集帧进行对齐计算，得到所述触屏操作对应的主体区域图像的对齐参数。
可选地，上述装置，还包括：
第六模块，用于接收针对任意一个或多个历史触屏操作对应的主体区域图像发起的编辑操作；
第七模块，用于根据所述编辑操作对相应的主体区域图像进行处理，将处理后的图像作为更新后的多重曝光处理效果图像并显示。
可选地，上述装置中，所述编辑操作至少包括：
修改主体区域图像操作和/或删除主体区域图像操作。
根据本公开实施例的第三方面，提供一种多重曝光摄影装置，包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为：
接收触屏操作，确定所述触屏操作对应的采集帧，按照第一规则从所述触屏操作对应的采集帧中确定所述触屏操作对应的主体区域图像，按照第二规则确定所述触屏操作对应的主体区域图像的对齐参数；
实时获取当前采集帧；
当所述触屏操作为首次接收的触屏操作时，将所述触屏操作对应的主体区域图像根据所述触屏操作对应的主体区域图像的对齐参数，合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
当所述触屏操作为非首次接收的触屏操作时，将所述触屏操作对应的主体区域图像以及所有历史触屏操作对应的主体区域图像，根据相应的对齐参数合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
从最后一次触屏操作后生成的多重曝光处理效果图像中确定一个多重曝光处理效果图像作为多重曝光结果图像。
根据本公开实施例的第四方面，提供一种非临时性计算机可读存储介质，当所述存储介质中的指令由移动终端的处理器执行时，使得移动终端能够执行一种多重曝光摄影方法，所述方法包括：
接收触屏操作，确定所述触屏操作对应的采集帧，按照第一规则从所述触屏操作对应的采集帧中确定所述触屏操作对应的主体区域图像，按照第二规则确定所述触屏操作对应的主体区域图像的对齐参数；
实时获取当前采集帧；
当所述触屏操作为首次接收的触屏操作时，将所述触屏操作对应的主体区域图像根据所述触屏操作对应的主体区域图像的对齐参数，合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
当所述触屏操作为非首次接收的触屏操作时，将所述触屏操作对应的主体区域图像以及所有历史触屏操作对应的主体区域图像，根据相应的对齐参数合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
从最后一次触屏操作后生成的多重曝光处理效果图像中确定一个多重曝光处理效果图像作为多重曝光结果图像。
本公开的实施例提供的技术方案可以包括以下有益效果：
本实施例技术方案在多重曝光摄影的过程中，根据用户发起的触屏操作，可以实时进行图像合成操作并显示多重曝光合成效果，这种更便捷更直观的实时预览功能，提高了用户体验。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。
图1是相关技术中第一种应用场景下的多重曝光摄影照片。
图2是根据一示例性实施例示出的一种多重曝光摄影方法的流程图。
图3是根据一示例性实施例示出的一种多重曝光摄影方法中根据触屏操作和对象图像分割方法确定主体区域图像的流程图。
图4是根据一示例性实施例示出的一种多重曝光摄影方法的详细流程图。
图5(a)是根据图4所示的多重曝光摄影方法中首次接收的触屏操作对应的采集帧及触屏操作时刻屏幕显示画面示意图。
图5(b)是根据图4所示的多重曝光摄影方法第二次接收的触屏操作对应的采集帧及触屏操作时刻屏幕显示画面示意图。
图5(c)是根据图4所示的多重曝光摄影方法第三次接收的触屏操作对应的采集帧及触屏操作时刻屏幕显示画面示意图。
图5(d)是根据图4所示的多重曝光摄影方法生成的多重曝光结果图。
图6(a)是根据图4所示的多重曝光摄影方法生成的一张多重曝光结果图。
图6(b)是根据图4所示的多重曝光摄影方法生成的另一张多重曝光结果图。
图7是根据一示例性实施例示出的一种多重曝光摄影装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
图2是根据一示例性实施例示出的一种多重曝光摄影方法的流程图，该方法可用于终端中，如图2所示，包括以下步骤。
在步骤S21中，接收触屏操作，确定所述触屏操作对应的采集帧，按照第一规则从所述触屏操作对应的采集帧中确定所述触屏操作对应的主体区域图像，按照第二规则确定所述触屏操作对应的主体区域图像的对齐参数；
在步骤S22中，实时获取当前采集帧；
在步骤S23中，当所述触屏操作为首次接收的触屏操作时，将所述触屏操作对应的主体区域图像根据所述触屏操作对应的主体区域图像的对齐参数，合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
当所述触屏操作为非首次接收的触屏操作时，将所述触屏操作对应的主体区域图像以及所有历史触屏操作对应的主体区域图像，根据相应的对齐参数合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；在步骤S24中，从最后一次触屏操作后生成的多重曝光处理效果图像中确定一个多重曝光处理效果图像作为多重曝光结果图像。
上述步骤S21中，触屏操作可以包括各种方式的操作。例如可以是点击屏幕操作，长按屏幕操作，也可以是在屏幕上的滑动操作等等。其中，触屏操作采用滑动操作方式时，滑动的轨迹可以是规则的，也可以是不规则。滑动轨迹可以包括开放式和/或闭合式的任意曲线。本文中的曲线包括直线，以及具有一个以上折点的折线。
本实施例中，识别出的主体区域图像可以是人物，动植物或者静物等等。由于每次接收到触屏操作时就会进行识别操作，因此，识别出的主体区域图像可能有多个。当识别出多个主体区域图像时，每次识别出的主体区域图像可以相同。例如，每次识别出的主体区域图像都是同一个人物。每次识别出的主体区域图像也可以不相同。例如，第一次识别出的主体区域图像为人物，第二次识别出的主体区域图像为静物等。
上述步骤S23中，在触屏操作为非首次接收的触屏操作时，将触屏操作对应的主体区域图像以及所有历史触屏操作对应的主体区域图像，根据相应的对齐参数合成到当前采集帧中。其中，可以将触屏操作对应的主体区域图像根据步骤S11确定的触屏操作对应的主体区域图像的对齐参数合成到当前采集帧中。可以将接收该触屏操作之前的所有历史触屏操作对应的主体区域图像，根据各个历史触屏操作对应的主体区域图像的对齐参数依次合成到当前采集帧中。在合成操作过程中，是将触屏操作对应的主体区域图像以及所有历史触屏操作对应的主体区域图像合成到同一个采集帧中。
上述步骤S24中，确定多重曝光结果图像的方式可以包括多种方式。例如，可以在确定多重曝光拍摄结束时，将最后一次触屏操作对应的主体区域图像以及所有历史触屏操作对应的主体区域图像合成到，最后一次触屏操作的接收时刻获取的采集帧中，将此时合成的图像作为多重曝光结果图像。还可以在确定多重曝光拍摄结束时，将最后一次触屏操作对应的主体区域图像以及所有历史触屏操作对应的主体区域图像合成到，确定多重曝光拍摄结束的时刻获取的采集帧中，将此时合成的图像作为多重曝光结果图像。
从上述实施例可以看出，本公开的实施例技术方案中，每次接收到触屏操作时，就会触发识别主体区域图像的操作，以及将识别出的主体区域图像进行合成的操作。而传统的多重曝光摄影中合成处理涉及的所有主体都是从已拍摄完成的照片(下文简称为原始照片)中分别提取出的，即提取出的每个主体都对应有一张原始照片。由此可见，本文中触屏操作对应的采集帧相当于多重曝光摄影中的一张原始照片，而触屏操作相当于触发了多重曝光摄影中的原始照片的一次拍摄操作。而根据此触屏操作识别出的主体区域图像，相当于从当前的原始照片中提取出的主体。根据之前已接收到的触屏操作时识别出的所有主体区域图像，相当于从之前拍摄的原始照片中分别提取出的主体。由此可以看出，本实施例中多重曝光处理效果图像相当于在每次进行多重曝光的原始照片拍摄时，生成的实时预览图。也就是，在多重曝光拍摄的过程中，每次进行原始照片的拍摄操作时就可以实时预览当前拍摄的原始照片与之前已拍摄完成的原始照片的多重曝光处理效果，而无需等待所有照片拍摄完成后进行一次平均合成操作得到多重曝光的效果图。可见，本实施例技术方案为用户提供了更便捷更直观的实时预览多重曝光处理效果的功能。在结束多重曝光摄影操作后，得到的多重曝光结果图像是实时预览的多重曝光处理效果图像中的一张，即实现了所见即所得的拍摄效果，提高了用户体验。并且，本实施例技术方案中通过触屏操作触发拍摄的方式与相关技术中按快门添加照片的方式完全不同，这种触屏操作触发拍摄的方式更便于用户拍摄操作，提高了用户体验。
本实施例还提供了另一种多重曝光摄影方法，该方法中，涉及的第一规则可以包括：
根据触屏操作和/或对象图像分割方法确定触屏操作对应的主体区域图像。
从上述描述可以看出，本实施例技术方案识别原始照片中的主体区域图像的方式至少包括如下三种：
根据触屏操作确定触屏操作对应的主体区域图像。也就是，可以将用户发起的触屏操作对应的图像区域，识别为主体区域图像。例如，用户发起的触屏操作包括滑动操作时，可以根据滑动轨迹确定触屏操作对应的图像区域，将此图像区域做为主体区域图像进行提取即可。这种方式，以用户发起的触屏操作做为识别操作的主要依据，可以更好地满足用户自主选择合成主体的要求，提高了用户体验。
根据对象图像分割方法确定触屏操作对应的主体区域图像。也就是，利用对象图像分割方法从触屏操作对应的采集帧，相当于触屏操作触发拍摄的原始照片中，自动识别出主体区域图像。其中，对象图像分割方法属于比较通用的对象分割技术，不再详细说明。这种方式，以对象图像分割方法为基础，实现自动识别主体的功能，简化了识别流程，提高了识别效率。
根据用户触屏操作和对象图像分割方法确定触屏操作对应的主体区域图像。也就是，将用户发起的触屏操作和对象图像分割方法相结合做为识别操作的两个依据。这种方式，在识别主体的过程中，综合了对象图像分割方法和用户自主选择合成主体的优势，在保证识别效率的同时，对主体图像区域的识别更准确更贴近用户需求。
本实施例还提供了另一种多重曝光摄影方法，该方法中，根据触屏操作和对象图像分割方法确定触屏操作对应的主体区域图像的过程如图3所示，至少包括如下操作。
在步骤S31中，在触屏操作对应的采集帧中，确定触屏操作对应的图像区域。
上述步骤S31中，确定触屏操作对应的图像区域的方式可以是任意方式。例如，触屏操作包括点击操作时，可以获取点击操作的点击位置在触屏操作对应的采集帧的坐标系中的坐标，简称为点击位置的坐标。将包括有点击位置的坐标在内的设定尺寸的区域确认为该触屏操作对应的图像区域。其中，设定尺寸可以是系统预先配置的，也可以由用户自主配置的。另外，触屏操作包括长按操作时，与确定点击操作对应的图像区域的方式基本相同，在此不再赘述。
又如，触屏操作包括滑动操作时，将滑动操作的滑动起点在触屏操作对应的采集帧的坐标系中的坐标，简称为滑动起点的坐标。滑动过程中所有滑动点在触屏操作对应的采集帧的坐标系中的坐标，简称为滑动点的坐标。滑动终点在触屏操作对应的采集帧的坐标系中的坐标，简称为滑动终点的坐标。当滑动轨迹为开放式曲线时，可以将包括有滑动起点的坐标、所有滑动点的坐标以及滑动终点的坐标在内的设定尺寸的区域，确认为该触屏操作对应的图像区域。当滑动轨迹为闭合式曲线时，可以将滑动起点的坐标、所有滑动点的坐标以及滑动终点的坐标做为边界，将触屏操作对应的采集帧划分为闭合曲线内的区域和闭合曲线外的区域。可以将包括有闭合曲线内的区域在内的设定尺寸的区域，确认为该触屏操作对应的图像区域。其中，设定尺寸可以是系统预先配置的，也可以由用户自主配置的。
在步骤S32中，将图像区域包括的位置信息和图像信息，输入至深度神经网络。
上述步骤S32中，图像区域包括的位置信息可以包括图像区域在触屏操作对应的采集帧的坐标系中的坐标范围。图像区域包括的图像信息可以包括图像区域的像素信息、光影信息等。像素信息可以包括色相、饱和度和亮度中的任一种或几种。光影信息可以包括与光线直接产生影响的所有信息，例如，亮度、对比度等等。
在步骤S33中，通过深度神经网络从图像区域中识别出的主体区域图像。
上述步骤S33中，深度神经网络识别主体区域图像的方式可采用任意对象分割方式，对此不做特别限制。
可见，本实施例的技术方案根据用户的触屏操作可以准确定位识别区域，之后使用深度神经网络，即人工智能技术，进行自动识别主体区域图像。使得识别出的主体区域图像的精度更高，从而提高多重曝光摄影的处理效果的质量，解决相关技术中画面主体区域容错性差，容易产生误判的问题。
本实施例还提供了另一种多重曝光摄影方法，该方法中，第二规则可以包括如下方式：
按照预先配置的对齐参数确定触屏操作对应的主体区域图像的对齐参数；或者
按照预先配置的对齐算法，将实时获取的当前采集帧与触屏操作对应的采集帧进行对齐计算，得到触屏操作对应的主体区域图像的对齐参数；或者
按照预先配置的对齐算法，将实时获取的当前采集帧与历史触屏操作对应的采集帧进行对齐计算，得到触屏操作对应的主体区域图像的对齐参数。
其中，按照预先配置的对齐参数确定触屏操作对应的主体区域图像的对齐参数，相当于基于对齐操作的经验，可以使用预先配置好的对齐参数，合成多重曝光摄影处理效果图像。这种方式，可以简化合成操作流程，提高合成操作效率。
按照预先配置的对齐算法，将实时获取的当前采集帧与触屏操作对应的采集帧进行对齐计算，得到触屏操作对应的主体区域图像的对齐参数。采用的对齐方式是，将每次接收到触屏操作时对应的采集帧，也就是每次触发拍摄操作时拍摄的原始照片为基准。与实时获取的当前采集帧进行对齐处理，得到多重曝光处理效果图像。
按照预先配置的对齐算法，将实时获取的当前采集帧与历史触屏操作对应的采集帧进行对齐计算，得到触屏操作对应的主体区域图像的对齐参数。采用的对齐方式是，将已接收到的触屏操作时对应的采集帧，也就是已拍摄完成的原始照片中的一张照片为基准。与实时获取的当前采集帧进行对齐处理，得到多重曝光处理效果图像。
可以看出，本实施例技术方案在实时合成多重曝光处理效果图像的过程中，可以采用任意的对齐方式进行合成操作。如前文所描述的，本实施例在每次触屏操作即触发拍摄操作时，都会实时识别主体区域图像且识别准确性较高。因此，在保证主体区域图像的识别可靠性的基础上，采用任意对齐方式合成的多重曝光处理效果图像的质量都具备一定的保证性，可以避免相关技术中拍摄完成多张照片后，再平均合成后引起的虚化失真，被摄主体混乱的问题。
本实施例还提供了另一种多重曝光摄影方法，该方法还包括如下操作：
接收针对任意一个或多个历史触屏操作对应的主体区域图像发起的编辑操作；
根据所述编辑操作对相应的主体区域图像进行处理，将处理后的图像作为更新后的多重曝光处理效果图像并显示。
本实施例技术方案，通过实时显示多重曝光处理效果图像的方式，使得用户可以及时查看多重曝光拍摄的效果。进而为用户提供对多重曝光处理效果图像进行实时调整，完善最终合成的照片的效果的功能。例如，某一个主体区域图像的姿势、表情和位置等效果不能满足用户需求，可以根据用户发起的编辑操作对该主体区域图像进行具体的处理，此操作不会影响其他主体区域图像。从而提高了用户体验。
本实施例还提供了另一种多重曝光摄影方法，该方法中编辑操作可以包括修改主体区域图像操作和/或删除主体区域图像操作。
其中，修改主体区域图像操作，可以在多重曝光摄影的过程中，在实时显示的多重曝光处理效果图像中，对指定的主体区域图像的各项参数进行修改。主体区域图像的各项参数可以包括图像位置，图像大小，图像像素，图像明亮度、图像透明度等等。
删除主体区域图像操作，可以在多重曝光摄影的过程中，在已识别出的所有主体区域图像中，删除指定的某一个或多个主体区域图像。
图4是根据一示例性实施例示出的一种多重曝光摄影方法的详细流程示意图。图5(a)-5(d)是图4所示多重曝光摄影过程中触屏操作对应的采集帧与多重曝光处理效果图的示意图。图6(a)-6(b)是按照图4所示方法得到的最终的多重曝光结果图像。
下面结合图4和图5(a)-5(d)，说明一种多重曝光摄影方法的实施过程，该过程如图4所示，包括以下步骤。
步骤S401，开始多重曝光摄影流程，实时获取当前采集帧并显示。
该步骤中，实时获取的当前采集帧如图5(a)的左侧所示，为实际采集的原始图像帧。
步骤S402，首次接收触屏操作，确定触屏操作对应的采集帧，根据触屏操作从该采集帧中确定第一主体区域图像。
本实施例中，上述步骤402可以分为如下几步操作：
S402a，接收用户发起的触屏操作，采集当前时刻的图像帧Ia。
如图5(a)右侧所示，用户发起的触屏操作的具体方式是点击屏幕中的被摄人物。
如图5(a)左侧所示，采集当前时刻的图像帧Ia为原始帧,相当于拍摄的原始照片。图像帧Ia即为该触屏操作对应的采集帧。
S402b，将图像帧Ia做为对齐计算的基准帧，生成对齐工具A.
该步骤中，对齐计算采用的对齐算法可以是预先设定的。
S402c，确定触屏操作在图像帧Ia中对应的图像区域。
该步骤中，可以在用户点击的位置周围，获取第一区域。该第一区域大小可以由系统或用户配置。如图5(a)右侧所示，用户点击操作对应的第一区域即为显示屏幕中长方框标识出的区域。而第一区域对应至图像帧Ia的区域即为触屏操作对应的图像区域。其中，为简化说明，以显示屏幕和图像帧Ia使用同一个坐标系为例，说明确定第一区域对应至图像帧Ia的区域的方式。可以先确定第一区域在显示屏幕的坐标系中的坐标范围，再将图像帧Ia的坐标系中同样的坐标范围的区域确认为第一区域对应至图像帧Ia的区域即可。
S402d，将触屏操作对应的图像区域的像素信息和位置信息，输入至深度神经网络中，由深度神经网络中自动预测出该图像区域中主体区域图像，并提取该主体区域图像，作为识别出的第一主体区域图像，可简称为对象Sa。
步骤S403，确定第一主体区域图像的对齐参数，使用所确定的第一主体区域图像的对齐参数，将第一主体区域图像合成到实时获取的当前采集帧上即可，并进行显示。
本实施例中，上述步骤403可以分为如下几步操作：
S403a，使用S402b中生成的对齐工具A，将实时获取的当前采集帧I对齐到基准帧Ia，得到对齐参数Wa；
S403b，使用对齐参数Wa，将对象Sa做仿射变换后，绘制到实时获取的当前采集帧I中，并进行显示。
其中，将对象Sa做仿射变换后，绘制到实时获取的当前采集帧I中，相当于将对象Sa合成到实时获取的当前采集帧中。此时显示的图像即为多重曝光处理效果图像，如图5(b)的右侧显示的图像。
步骤S404，第二次接收触屏操作，确定触屏操作对应的采集帧，根据触屏操作从该采集帧中确定第二主体区域图像。
本实施例中，上述步骤404可以包括如下操作：
S404a，接收用户发起的触屏操作，采集当前时刻的图像帧Ib。
如图5(b)左侧所示，采集当前时刻的图像帧Ib为原始帧,相当于拍摄的原始照片。图像帧Ib即为该触屏操作对应的采集帧。
如图5(b)右侧所示，用户发起的触屏操作的具体方式可以是在点击屏幕中的一个被摄人物。由于此时屏幕中显示的是多重曝光处理效果图像，因此该图像中包含了两个被摄主体。其中一个为合成主体，即步骤S402中已确定的主体区域图像，对象Sa。另一个为真实的被摄主体，即为图5(b)右侧中所示的对象Sb。用户点击的被摄人像即为对象 Sb。
S404b，确定触屏操作在图像帧Ib中对应的图像区域。
该步骤中，可以在用户点击的位置周围，获取第二区域。该第二区域大小可以由系统或用户配置。如图5(b)右侧所示，用户点击操作对应的第二区域即为手形光标在显示屏幕中长方框标识出的区域。而第二区域对应至图像帧Ib的区域即为触屏操作对应的图像区域。其中，确定第二区域对应至图像帧Ib的区域的原理，与确定第一区域对应至图像帧Ia的区域的原理相同，不再赘述。
S404c，将触屏操作对应的图像区域的像素信息和位置信息，输入至深度神经网络中，由深度神经网络中自动预测出该图像区域中主体区域图像，并提取该主体区域图像，作为识别出的第二主体区域图像，可简称为对象Sb。
步骤S405，确定第二主体区域图像的对齐参数，使用所确定的第二主体区域图像的对齐参数，将第二主体区域图像合成到实时获取的当前采集帧上，并且将历史触屏操作对应的主体区域图像，即第一主体区域图像，也合成到该采集帧上，进行显示。
本实施例中，上述步骤S405可以包括如下操作：
S405a，使用S402b中生成的对齐工具A，将实时获取的当前采集帧I对齐到基准帧Ia，得到对齐参数Wa_b；
S405b，使用S403a中得到的对齐参数Wa，将对象Sa做仿射变换后，绘制到实时获取的当前采集帧I中；
S405c，使用对齐参数Wa×Wa_b-1(即对齐参数Wa_b的逆矩阵)，将对象Sb做仿射变换后，绘制到实时获取的当前采集帧I中，并进行显示。
其中，S405b和S405c的绘制操作，是将对象Sa和对象Sb绘制到同一个采集帧中。此时显示的图像即为多重曝光处理效果图像，如图5(c)的右侧显示的图像。
步骤S406，第三次接收触屏操作，确定触屏操作对应的采集帧，根据触屏操作从该采集帧中确定第三主体区域图像。
本实施例中，上述步骤S406的操作可参见上述步骤S404的操作，在此不再赘述。其中，接收用户发起的触屏操作时，采集当前时刻的图像帧Ic，如图5(c)左侧所示。如图5(c)右侧所示，用户发起的触屏操作是对主体区域图像，即实际被摄人像Sc发起的。对象Sc即为本实施例中确定的第三主体区域图像。
步骤S407，确定第三主体区域图像的对齐参数，将第三主体区域图像合成到实时获取的当前采集帧上，并且将历史触屏操作对应的主体区域图像，即第一主体区域图像和第二区域图像，也合成到该采集帧上，进行显示。
本实施例中，上述步骤S407可以包括如下操作：
S407a，使用S402b中生成的对齐工具A，将实时获取的当前采集帧I对齐到基准帧Ia，得到对齐参数Wa_c；
S407b，使用S403a中得到的对齐参数Wa，将对象Sa做仿射变换后，绘制到实时获取的当前采集帧I中；
S407c，使用S405a中得到的对齐参数Wa_b，将对象Sb做仿射变换后，绘制到实时获取的当前采集帧I中。
S407d，使用对齐参数Wa×Wa_c-1(即对齐参数Wa_b的逆矩阵)，将对象Sc做仿射变换后，绘制到实时获取的当前采集帧I中，并进行显示。
其中，S407b、S407c和S407d的绘制操作，是将对象Sa、对象Sb和对象Sc绘制到同一个采集帧中。此时显示的图像即为多重曝光处理效果图像。
步骤S408，接收多重曝光拍摄的结束指令，将最后一次触屏操作对应的多重曝光处理效果图像作为多重曝光结果图像，输出显示并存储。
其中，最后一次触屏操作对应的多重曝光处理效果图像，可以是将最后一次触屏操作对应的主体区域图像以及所有历史触屏操作对应的主体区域图像合成到，最后一次触屏操作的接收时刻获取的采集帧中，得到的多重曝光处理效果图像。最后一次触屏操作对应的多重曝光处理效果图像，也可以是将最后一次触屏操作对应的主体区域图像以及所有历史触屏操作对应的主体区域图像合成到，多重曝光拍摄的结束指令的接收时刻获取的采集帧中，得到的多重曝光处理效果图像。
该步骤中，接收多重曝光拍摄的结束指令的方式，可以是用户在确认添加完成所有照片后，点击如图5(c)左侧所示的完成按钮。生成的多重曝光结果图像如图5(d)所示。以实际拍摄照片为例，按照上述方法生成的多重曝光结果图像如图6(a)-6(b)所示。图6(a)和
图6(b)是以两个场景进行拍摄后最终生成的多重曝光照片。可见，在相同场景中，将从不同照片中提取的被摄主体(即小朋友)，同时合成到一张照片的不同位置上，达到了一张照片中相同人物有多个分身的趣味效果。
另外，按照上述多重曝光摄影方法进行拍摄的过程中，实时显示的多重曝光处理效果图像，即为用户提供了实时预览多重曝光处理效果的功能。因此，用户可以根据需要，实时修改多重曝光处理效果图像。也就是，在上述方法的基础上，还可以接收用户针对多重曝光处理效果图像中的一个或多个主体区域图像发起的编辑操作。根据该编辑操作对用户选择的主体区域图像进行相应处理，将处理后的图像更新为多重曝光处理效果图像。例如，接收到的编辑操作为删除主体区域图像的操作时，可以将所有主体区域图像中除了被删除的主体区域以外剩余的主体区域图像，合成到实时获取的当前采集帧上进行显示。其中，合成的图像即为更新后的多重曝光处理效果图像。
图7是根据一示例性实施例示出的一种多重曝光摄影装置框图。参照图7，该装置包括第一模块71，第二模块72、第三模块73，第四模块74和第五模块75。
第一模块71，被配置为接收触屏操作，确定所述触屏操作对应的采集帧，按照第一规则从所述触屏操作对应的采集帧中确定所述触屏操作对应的主体区域图像，按照第二规则确定所述触屏操作对应的主体区域图像的对齐参数；
第二模块72，被配置为实时获取当前采集帧；
第三模块73，被配置为在所述触屏操作为首次接收的触屏操作时，将所述触屏操作对应的主体区域图像根据所述触屏操作对应的主体区域图像的对齐参数，合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
第四模块74，被配置为在所述触屏操作为非首次接收的触屏操作时，将所述触屏操作对应的主体区域图像以及所有历史触屏操作对应的主体区域图像，根据相应的对齐参数合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
第五模块75，被配置为从最后一次触屏操作后生成的多重曝光处理效果图像中确定一个多重曝光处理效果图像作为多重曝光结果图像。
本实施例提供另一种多重曝光摄影装置，其中，第一规则包括根据触屏操作和/或对象图像分割方法确定触屏操作对应的主体区域图像。
本实施例提供另一种多重曝光摄影装置，其中第一模块71可以包括如下子模块。
第一子模块，被配置为在所述触屏操作对应的采集帧中，确定所述触屏操作对应的图像区域；
第二子模块，被配置为将所述图像区域包括的位置信息和图像信息，输入至深度神经网络；
第三子模块，被配置为通过所述深度神经网络从所述图像区域中识别出的主体区域图像。
本实施例提供另一种多重曝光摄影装置，其中，第二规则可以包括如下方式：
按照预先配置的对齐参数确定所述触屏操作对应的主体区域图像的对齐参数；或者
按照预先配置的对齐算法，将实时获取的当前采集帧与所述触屏操作对应的采集帧进行对齐计算，得到所述触屏操作对应的主体区域图像的对齐参数；或者
按照预先配置的对齐算法，将实时获取的当前采集帧与历史触屏操作对应的采集帧进行对齐计算，得到所述触屏操作对应的主体区域图像的对齐参数。
本实施例提供另一种多重曝光摄影装置，该装置还可以包括第六模块和第七模块。
第六模块，被配置为，接收针对任意一个或多个历史触屏操作对应的主体区域图像发起的编辑操作；
第七模块，被配置为，根据所述编辑操作对相应的主体区域图像进行处理，将处理后的图像作为更新后的多重曝光处理效果图像并显示。
实施例提供另一种多重曝光摄影装置，其中，涉及的编辑操作可以包括修改主体区域图像操作和/或删除主体区域图像操作。
关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
一示例性实施例提供一种多重曝光摄影装置，包括处理器，以及用于存储处理器可执行指令的存储器。其中，处理器被配置为：
接收触屏操作，确定触屏操作对应的采集帧，按照第一规则从触屏操作对应的采集帧中确定触屏操作对应的主体区域图像，按照第二规则确定触屏操作对应的主体区域图像的对齐参数；
实时获取当前采集帧；
当所述触屏操作为首次接收的触屏操作时，将所述触屏操作对应的主体区域图像根据所述触屏操作对应的主体区域图像的对齐参数，合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
当所述触屏操作为非首次接收的触屏操作时，将所述触屏操作对应的主体区域图像以及所有历史触屏操作对应的主体区域图像，根据相应的对齐参数合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
从最后一次触屏操作后生成的多重曝光处理效果图像中确定一个多重曝光处理效果图像作为多重曝光结果图像。
关于上述实施例中的装置，其中各个部分执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
一示例性实施例提供一种非临时性计算机可读存储介质，当存储介质中的指令由移动终端的处理器执行时，可以使得移动终端能够执行一种多重曝光摄影方法，该方法包括：
接收触屏操作，确定触屏操作对应的采集帧，按照第一规则从触屏操作对应的采集帧中确定触屏操作对应的主体区域图像，按照第二规则确定触屏操作对应的主体区域图像的对齐参数；
实时获取当前采集帧；
当所述触屏操作为首次接收的触屏操作时，将所述触屏操作对应的主体区域图像根据所述触屏操作对应的主体区域图像的对齐参数，合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
当所述触屏操作为非首次接收的触屏操作时，将所述触屏操作对应的主体区域图像以及所有历史触屏操作对应的主体区域图像，根据相应的对齐参数合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
从最后一次触屏操作后生成的多重曝光处理效果图像中确定一个多重曝光处理效果图像作为多重曝光结果图像。
关于上述实施例中存储介质中的指令，其中各个执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本发明的真正范围和精神由下面的权利要求指出。
应当理解的是，本发明并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (10)

1.一种多重曝光摄影方法，其特征在于，包括：
接收触屏操作，确定所述触屏操作对应的采集帧，按照第一规则从所述触屏操作对应的采集帧中确定所述触屏操作对应的主体区域图像，按照第二规则确定所述触屏操作对应的主体区域图像的对齐参数；
实时获取当前采集帧；
当所述触屏操作为首次接收的触屏操作时，将所述触屏操作对应的主体区域图像根据所述触屏操作对应的主体区域图像的对齐参数，合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
当所述触屏操作为非首次接收的触屏操作时，将所述触屏操作对应的主体区域图像以及所有历史触屏操作对应的主体区域图像，根据相应的对齐参数合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
从最后一次触屏操作后生成的多重曝光处理效果图像中确定一个多重曝光处理效果图像作为多重曝光结果图像；
所述第一规则包括：
根据所述触屏操作和对象图像分割方法确定所述触屏操作对应的主体区域图像；
所述根据所述触屏操作和对象图像分割方法确定所述触屏操作对应的主体区域图像，包括：
在所述触屏操作对应的采集帧中，确定所述触屏操作对应的图像区域；
将所述图像区域包括的位置信息和图像信息，输入至深度神经网络；
通过所述深度神经网络从所述图像区域中识别出的主体区域图像。
2.根据权利要求1所述的方法，其特征在于，所述第二规则包括：
按照预先配置的对齐参数确定所述触屏操作对应的主体区域图像的对齐参数；或者
按照预先配置的对齐算法，将实时获取的当前采集帧与所述触屏操作对应的采集帧进行对齐计算，得到所述触屏操作对应的主体区域图像的对齐参数；或者
按照预先配置的对齐算法，将实时获取的当前采集帧与历史触屏操作对应的采集帧进行对齐计算，得到所述触屏操作对应的主体区域图像的对齐参数。
3.根据权利要求1所述的方法，其特征在于，所述方法还包括：
接收针对任意一个或多个历史触屏操作对应的主体区域图像发起的编辑操作；
根据所述编辑操作对相应的主体区域图像进行处理，将处理后的图像作为更新后的多重曝光处理效果图像并显示。
4.根据权利要求3所述的方法，其特征在于，所述编辑操作至少包括：
修改主体区域图像操作和／或删除主体区域图像操作。
5.一种多重曝光摄影装置，其特征在于，包括：
第一模块，用于接收触屏操作，确定所述触屏操作对应的采集帧，按照第一规则从所述触屏操作对应的采集帧中确定所述触屏操作对应的主体区域图像，按照第二规则确定所述触屏操作对应的主体区域图像的对齐参数；
第二模块，用于实时获取当前采集帧；
第三模块，用于在所述触屏操作为首次接收的触屏操作时，将所述触屏操作对应的主体区域图像根据所述触屏操作对应的主体区域图像的对齐参数，合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
第四模块，用于在所述触屏操作为非首次接收的触屏操作时，将所述触屏操作对应的主体区域图像以及所有历史触屏操作对应的主体区域图像，根据相应的对齐参数合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
第五模块，用于从最后一次触屏操作后生成的多重曝光处理效果图像中确定一个多重曝光处理效果图像作为多重曝光结果图像；
所述第一规则包括：
根据所述触屏操作和对象图像分割方法确定所述触屏操作对应的主体区域图像；
所述第一模块，包括：
第一子模块，用于在所述触屏操作对应的采集帧中，确定所述触屏操作对应的图像区域；
第二子模块，用于将所述图像区域包括的位置信息和图像信息，输入至深度神经网络；
第三子模块，用于通过所述深度神经网络从所述图像区域中识别出的主体区域图像。
6.根据权利要求5所述的装置，其特征在于，所述第二规则包括：
按照预先配置的对齐参数确定所述触屏操作对应的主体区域图像的对齐参数；或者
按照预先配置的对齐算法，将实时获取的当前采集帧与所述触屏操作对应的采集帧进行对齐计算，得到所述触屏操作对应的主体区域图像的对齐参数；或者
按照预先配置的对齐算法，将实时获取的当前采集帧与历史触屏操作对应的采集帧进行对齐计算，得到所述触屏操作对应的主体区域图像的对齐参数。
7.根据权利要求5所述的装置，还包括：
第六模块，用于接收针对任意一个或多个历史触屏操作对应的主体区域图像发起的编辑操作；
第七模块，用于根据所述编辑操作对相应的主体区域图像进行处理，将处理后的图像作为更新后的多重曝光处理效果图像并显示。
8.根据权利要求7所述的装置，所述编辑操作至少包括：
修改主体区域图像操作和／或删除主体区域图像操作。
9.一种多重曝光摄影装置，其特征在于，包括：
处理器；
用于存储处理器可执行指令的存储器;
其中，所述处理器被配置为：
接收触屏操作，确定所述触屏操作对应的采集帧，按照第一规则从所述触屏操作对应的采集帧中确定所述触屏操作对应的主体区域图像，按照第二规则确定所述触屏操作对应的主体区域图像的对齐参数；
实时获取当前采集帧；
当所述触屏操作为首次接收的触屏操作时，将所述触屏操作对应的主体区域图像根据所述触屏操作对应的主体区域图像的对齐参数，合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
当所述触屏操作为非首次接收的触屏操作时，将所述触屏操作对应的主体区域图像以及所有历史触屏操作对应的主体区域图像，根据相应的对齐参数合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
从最后一次触屏操作后生成的多重曝光处理效果图像中确定一个多重曝光处理效果图像作为多重曝光结果图像；
所述第一规则包括：
根据所述触屏操作和对象图像分割方法确定所述触屏操作对应的主体区域图像；
所述根据所述触屏操作和对象图像分割方法确定所述触屏操作对应的主体区域图像，包括：
在所述触屏操作对应的采集帧中，确定所述触屏操作对应的图像区域；
将所述图像区域包括的位置信息和图像信息，输入至深度神经网络；
通过所述深度神经网络从所述图像区域中识别出的主体区域图像。
10.一种非临时性计算机可读存储介质，当所述存储介质中的指令由移动终端的处理器执行时，使得移动终端能够执行一种多重曝光摄影方法，所述方法包括：
接收触屏操作，确定所述触屏操作对应的采集帧，按照第一规则从所述触屏操作对应的采集帧中确定所述触屏操作对应的主体区域图像，按照第二规则确定所述触屏操作对应的主体区域图像的对齐参数；
实时获取当前采集帧；
当所述触屏操作为首次接收的触屏操作时，将所述触屏操作对应的主体区域图像根据所述触屏操作对应的主体区域图像的对齐参数，合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
当所述触屏操作为非首次接收的触屏操作时，将所述触屏操作对应的主体区域图像以及所有历史触屏操作对应的主体区域图像，根据相应的对齐参数合成到当前采集帧中，将合成后的图像作为多重曝光处理效果图像并显示；
从最后一次触屏操作后生成的多重曝光处理效果图像中确定一个多重曝光处理效果图像作为多重曝光结果图像；
所述第一规则包括：
根据所述触屏操作和对象图像分割方法确定所述触屏操作对应的主体区域图像；
所述根据所述触屏操作和对象图像分割方法确定所述触屏操作对应的主体区域图像，包括：
在所述触屏操作对应的采集帧中，确定所述触屏操作对应的图像区域；
将所述图像区域包括的位置信息和图像信息，输入至深度神经网络；
通过所述深度神经网络从所述图像区域中识别出的主体区域图像。
CN201910923409.3A 2019-09-27 2019-09-27 多重曝光摄影方法及装置 Active CN110611768B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201910923409.3A CN110611768B (zh) 2019-09-27 2019-09-27 多重曝光摄影方法及装置
US16/744,698 US11146742B2 (en) 2019-09-27 2020-01-16 Method and apparatus for multi-exposure photography, and storage medium
EP20153132.4A EP3799414A1 (en) 2019-09-27 2020-01-22 Method and apparatus for multi-exposure photography

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910923409.3A CN110611768B (zh) 2019-09-27 2019-09-27 多重曝光摄影方法及装置

Publications (2)

Publication Number Publication Date
CN110611768A CN110611768A (zh) 2019-12-24
CN110611768B true CN110611768B (zh) 2021-06-29

Family

ID=68893661

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910923409.3A Active CN110611768B (zh) 2019-09-27 2019-09-27 多重曝光摄影方法及装置

Country Status (3)

Country Link
US (1) US11146742B2 (zh)
EP (1) EP3799414A1 (zh)
CN (1) CN110611768B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111107267A (zh) * 2019-12-30 2020-05-05 广州华多网络科技有限公司 图像处理方法、装置、设备及存储介质
KR20220033924A (ko) * 2020-09-10 2022-03-17 삼성전자주식회사 증강 현실 장치 및 그 제어 방법
CN113497973B (zh) * 2021-09-06 2021-12-10 北京市商汤科技开发有限公司 视频处理方法和装置、计算机可读存储介质及计算机设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104113692A (zh) * 2014-07-22 2014-10-22 深圳市中兴移动通信有限公司 图像拍摄方法和装置
CN107077720A (zh) * 2016-12-27 2017-08-18 深圳市大疆创新科技有限公司 图像处理的方法、装置和设备
CN108540713A (zh) * 2017-03-01 2018-09-14 奥林巴斯株式会社 摄像装置、图像处理装置、摄像方法及存储介质

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002171398A (ja) * 2000-12-04 2002-06-14 Konica Corp 画像処理方法及び電子カメラ
US20050129324A1 (en) * 2003-12-02 2005-06-16 Lemke Alan P. Digital camera and method providing selective removal and addition of an imaged object
US7702131B2 (en) * 2005-10-13 2010-04-20 Fujifilm Corporation Segmenting images and simulating motion blur using an image sequence
US8275215B2 (en) * 2007-05-08 2012-09-25 Arcsoft (Shanghai) Technology Company, Ltd Merging images
JP5108747B2 (ja) * 2008-12-26 2012-12-26 富士フイルム株式会社 情報表示装置、方法およびプログラム
KR20110050834A (ko) * 2009-11-09 2011-05-17 삼성전자주식회사 휴대용 단말기에서 영상 정합 방법 및 장치
JP4947668B2 (ja) * 2009-11-20 2012-06-06 シャープ株式会社 電子機器、表示制御方法、およびプログラム
US8810691B2 (en) 2010-09-03 2014-08-19 Olympus Imaging Corp. Imaging apparatus, imaging method and computer-readable recording medium
JP5814566B2 (ja) * 2011-02-28 2015-11-17 オリンパス株式会社 撮像装置、撮像方法及び撮像装置の制御プログラム
JP5762114B2 (ja) * 2011-04-28 2015-08-12 キヤノン株式会社 撮像装置及びその制御方法
JP5921080B2 (ja) * 2011-04-28 2016-05-24 キヤノン株式会社 撮像装置及びその制御方法
US8866943B2 (en) * 2012-03-09 2014-10-21 Apple Inc. Video camera providing a composite video sequence
JP2013225245A (ja) * 2012-04-23 2013-10-31 Sony Corp 画像処理装置、画像処理方法及びプログラム
CN103327253B (zh) 2013-06-26 2015-05-13 努比亚技术有限公司 多重曝光方法和摄像装置
US9185284B2 (en) 2013-09-06 2015-11-10 Qualcomm Incorporated Interactive image composition
CN105659286B (zh) * 2013-09-18 2021-09-28 英特尔公司 自动化图像裁剪和分享
EP2869239A3 (en) 2013-11-04 2015-08-19 Facebook, Inc. Systems and methods for facial representation
KR102138521B1 (ko) * 2013-12-12 2020-07-28 엘지전자 주식회사 이동단말기 및 그 제어방법
US9659350B2 (en) * 2014-01-31 2017-05-23 Morpho, Inc. Image processing device and image processing method for image correction, and non-transitory computer readable recording medium thereof
US9158985B2 (en) * 2014-03-03 2015-10-13 Xerox Corporation Method and apparatus for processing image of scene of interest
CN103856718B (zh) * 2014-03-26 2017-02-15 努比亚技术有限公司 照片合成的方法及装置
KR102356448B1 (ko) * 2014-05-05 2022-01-27 삼성전자주식회사 이미지 합성 방법 및 그 전자 장치
CN104243819B (zh) 2014-08-29 2018-02-23 小米科技有限责任公司 照片获取方法及装置
JP6506036B2 (ja) 2015-02-02 2019-04-24 オリンパス株式会社 撮像機器
JP6065939B2 (ja) * 2015-06-11 2017-01-25 カシオ計算機株式会社 表示装置、及び表示方法
JP6372472B2 (ja) * 2015-10-26 2018-08-15 京セラドキュメントソリューションズ株式会社 表示装置
CN106851125B (zh) 2017-03-31 2020-10-16 努比亚技术有限公司 一种移动终端及多重曝光拍摄方法
WO2018226644A1 (en) * 2017-06-08 2018-12-13 Walmart Apollo, Llc Augmented touch-sensitive display system
CN108419007A (zh) 2018-01-30 2018-08-17 努比亚技术有限公司 克隆照片拍摄方法、终端及计算机可读存储介质
CN108777766B (zh) * 2018-08-10 2021-01-15 维沃移动通信有限公司 一种多人拍照方法、终端及存储介质

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104113692A (zh) * 2014-07-22 2014-10-22 深圳市中兴移动通信有限公司 图像拍摄方法和装置
CN107077720A (zh) * 2016-12-27 2017-08-18 深圳市大疆创新科技有限公司 图像处理的方法、装置和设备
CN108540713A (zh) * 2017-03-01 2018-09-14 奥林巴斯株式会社 摄像装置、图像处理装置、摄像方法及存储介质

Also Published As

Publication number Publication date
US20210099654A1 (en) 2021-04-01
CN110611768A (zh) 2019-12-24
EP3799414A1 (en) 2021-03-31
US11146742B2 (en) 2021-10-12

Similar Documents

Publication Publication Date Title
US10477005B2 (en) Portable electronic devices with integrated image/video compositing
CN106899781B (zh) 一种图像处理方法及电子设备
US10540806B2 (en) Systems and methods for depth-assisted perspective distortion correction
EP3457683B1 (en) Dynamic generation of image of a scene based on removal of undesired object present in the scene
CN109089047B (zh) 控制对焦的方法和装置、存储介质、电子设备
CN106375662B (zh) 一种基于双摄像头的拍摄方法、装置和移动终端
CN107516319B (zh) 一种高精度简易交互式抠图方法、存储设备及终端
US9692964B2 (en) Modification of post-viewing parameters for digital images using image region or feature information
CN110611768B (zh) 多重曝光摄影方法及装置
CN110324532B (zh) 一种图像虚化方法、装置、存储介质及电子设备
CN110349163B (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
JPWO2008126371A1 (ja) 映像合成方法、映像合成システム
WO2019214574A1 (zh) 图像拍摄方法、装置及电子终端
WO2018032702A1 (zh) 一种图像处理方法及装置
CN106296789B (zh) 一种虚拟植入物体在实景中穿梭的方法及终端
CN106296574A (zh) 三维照片生成方法和装置
CN111654624B (zh) 拍摄提示方法、装置及电子设备
CN109618088B (zh) 具有光照识别与重现功能的智能化拍摄系统及方法
CN110365897B (zh) 图像修正方法和装置、电子设备、计算机可读存储介质
CN112887610A (zh) 拍摄方法、装置、电子设备及存储介质
CN114897916A (zh) 图像处理方法及装置、非易失性可读存储介质、电子设备
CN110266926A (zh) 图像处理方法、装置、移动终端以及存储介质
CN113225484B (zh) 快速获取屏蔽非目标前景的高清图片的方法及装置
WO2023020190A1 (zh) 一种全景深图像合成方法、存储介质及智能手机
CN109582811B (zh) 图像处理方法、装置、电子设备和计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant