CN113170037B - 一种拍摄长曝光图像的方法和电子设备 - Google Patents
一种拍摄长曝光图像的方法和电子设备 Download PDFInfo
- Publication number
- CN113170037B CN113170037B CN201880099886.6A CN201880099886A CN113170037B CN 113170037 B CN113170037 B CN 113170037B CN 201880099886 A CN201880099886 A CN 201880099886A CN 113170037 B CN113170037 B CN 113170037B
- Authority
- CN
- China
- Prior art keywords
- image
- interface
- user
- electronic device
- mobile phone
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 103
- 230000004044 response Effects 0.000 claims abstract description 26
- 238000012545 processing Methods 0.000 claims description 90
- 230000015654 memory Effects 0.000 claims description 35
- 241001465754 Metazoa Species 0.000 claims description 19
- 230000000007 visual effect Effects 0.000 abstract description 8
- 230000006870 function Effects 0.000 description 43
- 238000004891 communication Methods 0.000 description 40
- 230000006854 communication Effects 0.000 description 40
- 230000008569 process Effects 0.000 description 36
- 238000007726 management method Methods 0.000 description 21
- 239000010410 layer Substances 0.000 description 20
- 238000010586 diagram Methods 0.000 description 19
- 230000000875 corresponding effect Effects 0.000 description 17
- 230000000694 effects Effects 0.000 description 14
- 230000005236 sound signal Effects 0.000 description 13
- 238000003709 image segmentation Methods 0.000 description 12
- 238000010295 mobile communication Methods 0.000 description 12
- 238000004422 calculation algorithm Methods 0.000 description 10
- 210000000988 bone and bone Anatomy 0.000 description 9
- 239000000284 extract Substances 0.000 description 9
- 230000011218 segmentation Effects 0.000 description 9
- 238000004590 computer program Methods 0.000 description 8
- 230000003068 static effect Effects 0.000 description 8
- 238000013527 convolutional neural network Methods 0.000 description 5
- 238000001514 detection method Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 5
- 238000013528 artificial neural network Methods 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 229920001621 AMOLED Polymers 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000014759 maintenance of location Effects 0.000 description 3
- 230000009467 reduction Effects 0.000 description 3
- 238000003786 synthesis reaction Methods 0.000 description 3
- 241001464837 Viridiplantae Species 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 2
- 230000003416 augmentation Effects 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000036772 blood pressure Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 230000001976 improved effect Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 238000010422 painting Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 239000002096 quantum dot Substances 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 235000004012 Calla palustris Nutrition 0.000 description 1
- 240000006620 Calla palustris Species 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000007175 bidirectional communication Effects 0.000 description 1
- 238000013529 biological neural network Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 239000012792 core layer Substances 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000010985 leather Substances 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 230000002138 osteoinductive effect Effects 0.000 description 1
- 238000011176 pooling Methods 0.000 description 1
- 238000012913 prioritisation Methods 0.000 description 1
- 230000010349 pulsation Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000003238 somatosensory effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000008093 supporting effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/72—Combination of two or more compensation controls
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20112—Image segmentation details
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Studio Devices (AREA)
- Exposure Control For Cameras (AREA)
- Camera Bodies And Camera Details Or Accessories (AREA)
- Indication In Cameras, And Counting Of Exposures (AREA)
- Telephone Function (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请提供了一种图像显示的方法和电子设备,涉及电子技术领域,能够在用户需要拍摄长曝光图像时,在最终生成的长曝光图像上保留清晰的目标对象,用户视觉效果较好。该方法包括:显示第一界面,第一界面为电子设备的相机界面;在第一界面上检测到用户的第一操作;响应于第一操作,获得多帧图像;在第一界面上检测到用户的第二操作;响应于第二操作,显示第一图像;其中,第一图像包括第一区域和第二区域,第一区域内包括由电子设备识别的第一对象,第一对象由多帧图像中第一帧数的图像得到,第一帧数的图像的第一区域包括第一对象,第二区域的图像由多帧图像中第二帧数的图像得到;第一帧数小于第二帧数。
Description
技术领域
本申请涉及电子技术领域,并且更具体地,涉及一种拍摄长曝光图像的方法和电子设备。
背景技术
长曝光摄影(long exposure photography)是一种特殊的摄影技巧,一般是通过延长快门打开时间来实现,常用于镜头中同时包含固定物体和移动物体的场景,如光迹摄影、水景摄影以及天文摄影等,可以拍摄出特殊的效果。由于长曝光摄影能够产生独特的拍照效果,因此深受广大摄影爱好者的喜爱,随着手机、平板电脑等移动终端设备的不断发展,目前市场上主流的机型都已经支持了长曝光摄影。采用市场上这些主流手机的长曝光摄影进行拍照时,一般可以达到相应的效果。
但是,目前在拍摄长曝光图像时,如果待拍摄的主体存在人或者其他不是完全静止的物体时,最终拍摄出来的图像会产生模糊。
发明内容
本申请提供一种拍摄长曝光图像的方法,对待拍摄的人或者其他不是完全静止的物体不进行长曝光处理,而对其他区域进行长曝光处理,从而得到人或者物体清晰而背景长曝光的图像,用户的视觉效果较好。
为达到上述目的,本申请实施例采用如下技术方案:
第一方面,提供了一种拍摄长曝光图像的方法,应用于电子设备,该方法包括:显示第一界面,第一界面为电子设备的相机界面;在第一界面上检测到用户的第一操作;响应于第一操作,获得多帧图像;在第一界面上检测到用户的第二操作;响应于第二操作,显示第一图像;其中,第一图像包括第一区域和第二区域,第一区域内包括由电子设备识别的第一对象,第一对象由多帧图像中第一帧数的图像得到,第一帧数的图像的第一区域包括第一对象,第二区域的图像由多帧图像中第二帧数的图像得到;第一帧数小于第二帧数。
其中,第一对象由多帧图像中第一帧数的图像得到,还可以理解为第一对象由多帧图像中的某一帧图像中提取,或者,由该多帧图像中某几帧图像处理后得到的图像中提取。
在一些可能的实现方式中,该第一图像还包括第三区域,例如,该第三区域为水印所在的区域。
在一些可能的实现方式中,该第二帧数的图像为该多帧图像。
在一些可能的实现方式中,该第一对象所在的第一区域由该多帧图像中的第一帧图像得到。
在一些可能的实现方式中,电子设备可以基于人工智能(artificialintelligence,AI)从该多帧图像中选择该第一对象最美的一帧图像,并从该图像中提取出该第一对象所在的第一区域。
在一些可能的实现方式中,该第一对象可以由多帧图像中几帧图像经过处理得到,电子设备可以先选择几帧图像进行处理得到处理后的一帧图像,然后从这一帧图像中提取该第一对象所在的第一区域。
本申请实施例中,第一对象由多帧图像中第一帧数的图像得到,这一过程还可以理解为,电子设备首先从拍摄获得的多帧图像中确定出第一帧数的图像,再由第一帧数的图像确定出该第一对象。
本申请实施例的拍摄长曝光图像的方法,通过多帧图像中不同区域的图像进行差别处理,第一区域和第二区域的图像由不同帧数的图像处理得到,使得最终获得图像中第一区域的图像清晰,用户的视觉效果较好。
结合第一方面,在第一方面的某些可能的实现方式中,第二区域的图像由第二帧数的图像经过长曝光处理得到。
在一些可能的实现方式中,该第二区域的图像由该多帧图像经过长曝光处理得到。
本申请实施例的拍摄长曝光图像的方法,通过对第二区域的图像进行长曝光处理,可以使得最终生成的图像中第一区域清晰而第二区域长曝光,用户的视觉效果较好。
结合第一方面,在第一方面的某些可能的实现方式中,第一帧数的图像包括第二图像,第二图像包括该第一对象。
在一些可能的实现方式中,该第二图像为该多帧图像中第一对象最美的一帧图像。
在一些可能的实现方式中,该第二图像为该多帧图像中第一帧图像。
本申请实施例的拍摄长曝光图像的方法,通过从拍摄的多帧图像中的第二图像中提取第一区域的图像,使得最终得到的第一图像中该第一区域中的第一对象清晰。
结合第一方面,在第一方面的某些可能的实现方式中,在第一界面上检测到用户的第一操作之前,方法还包括:在第一界面上检测到用户的第三操作;响应于第三操作,进入第一界面的第一处理模式,第一处理模式为多种长曝光处理模式中的一种。
结合第一方面,在第一方面的某些可能的实现方式中,第一界面上包括第一处理模式的控件,第三操作为用户点击控件的操作。
该方案中,通过点击第一界面上该控件,用户可以方便的进入该第一处理模式。
在一些可能的实现方式中,电子设备的第一界面上显示有控件1,在第一界面上检测到用户的第三操作,包括:检测到用户点击控件1,显示功能列表,功能列表中包括用于指示第一处理模式的控件2,检测到用户点击控件2的操作。
在一些可能的实现方式中,在第一界面上检测到用户的第三操作,包括:电子设备检测到用户在第一界面上的预设手势,例如划一个圆圈轨迹的手势操作。
在该方案中,用户可以通过在第一界面上的预设手势指示电子设备进入第一处理模式。
结合第一方面,在第一方面的某些可能的实现方式中,响应于第一操作,获得多帧图像,包括:响应于第一操作,开始进行拍摄;在第一界面上检测到用户用于指示停止拍摄的第四操作;响应于第四操作,获得多帧图像。
在一些可能的实现方式中,响应于第一操作,获得多帧图像,包括:响应于第一操作,开始进行拍摄;在第一界面上检测到用户语音提示停止拍摄的第四操作;响应于第四操作,获得多帧图像。
该方案中,用户可以根据自身的需求选择需要曝光的时间,提高了用户的体验。
结合第一方面,在第一方面的某些可能的实现方式中,显示第一界面之前,方法还包括:在电子设备的桌面上检测到用户用于指示打开相机应用的第五操作。
在一些可能的实现方式中,显示第一界面之前,方法还包括:在电子设备的锁屏界面检测到用户在触摸屏上滑动的操作。
结合第一方面,在第一方面的某些可能的实现方式中,第一对象为预设的目标对象。
在一些可能的实现方式中,该第一对象为电子设备根据待拍摄主体自动确定的目标对象。
在一些可能的实现方式中,该第一对象对待拍摄主体中面积最大的物体,或者,该第一对象为待拍摄主体中位于中间位置的物体。
该方案中,电子设备可以预设目标对象,当用户需要拍摄包含有预设对象的长曝光图像时,电子设备可以自动确定该第一对象。
结合第一方面,在第一方面的某些可能的实现方式中,第一对象包括人或者动物。
第二方面,本技术方案提供了一种显示图像的装置,该装置包含在电子设备中,该装置具有实现上述方面及上述方面的可能实现方式中电子设备行为的功能。功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。硬件或软件包括一个或多个与上述功能相对应的模块或单元。例如,显示模块或单元、获取模块或单元等。
第三方面,本技术方案提供了一种电子设备,包括:触摸屏,其中,触摸屏包括触敏表面和显示器;摄像头;一个或多个处理器;存储器;多个应用程序;以及一个或多个计算机程序。其中,一个或多个计算机程序被存储在存储器中,一个或多个计算机程序包括指令。当指令被电子设备执行时,使得电子设备执行上述任一方面任一项可能的实现中的拍摄长曝光图像的方法。
第四方面,本技术方案提供了一种电子设备,包括一个或多个处理器和一个或多个存储器。该一个或多个存储器与一个或多个处理器耦合,一个或多个存储器用于存储计算机程序代码,计算机程序代码包括计算机指令,当一个或多个处理器执行计算机指令时,使得电子设备执行上述任一方面任一项可能的实现中的拍摄长曝光图像的方法。
第五方面,本技术方案提供了一种计算机存储介质,包括计算机指令,当计算机指令在电子设备上运行时,使得电子设备执行上述任一方面任一项可能的实现中的拍摄长曝光图像的方法。
第六方面,本技术方案提供了一种计算机程序产品,当计算机程序产品在电子设备上运行时,使得电子设备执行上述任一方面任一项可能的设计中的拍摄长曝光图像的方法。
附图说明
图1是本申请实施例提供的一种电子设备的硬件结构示意图。
图2是本申请实施例提供的一种电子设备的软件结构示意图。
图3是本申请实施例提供的一组显示界面示意图。
图4是本申请实施例提供的另一组显示界面示意图。
图5是本申请实施例提供的另一组显示界面示意图。
图6是本申请实施例提供的另一组显示界面示意图。
图7是本申请实施例提供的另一组显示界面示意图。
图8是本申请实施例提供的另一组显示界面示意图。
图9是本申请实施例提供的另一组显示界面示意图。
图10是本申请实施例提供的另一组显示界面示意图。
图11是本申请实施例提供的另一组显示界面示意图。
图12是本申请实施例提供的另一组显示界面示意图。
图13是本申请实施例提供的另一组显示界面示意图。
图14是本申请实施例提供的另一组显示界面示意图。
图15是本申请实施例提供的本申请实施例的拍摄长曝光图像的算法的示意性流程图。
图16是本申请实施例提供的长曝光图像的生成过程的示意图。
图17是本申请实施例提供的一种图像分割过程示意图。
图18是本申请实施例提供的拍摄长曝光图像的方法的示意性流程图。
图19是本申请实施例提供的电子设备的示意性框图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述。其中,在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;本文中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,在本申请实施例的描述中,“多个”是指两个或多于两个。
以下,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
目前所有的手机进行长曝光拍照时,都是对镜头内的场景进行无差别的长曝光处理,换句话说,当用户想拍摄出长曝光的照片时,现有的设备和技术已经可以做到,但当用户希望在长曝光的照片的基础上拍摄人像或者其他不是完全静止的物体时,拍摄出的照片质量就会变差,这主要是因为拍摄过程中,作为前景的人或者物体必须完全静止,否则就会在最终的图像产生模糊。
本申请实施例提供了一种拍摄长曝光图像方法,可以应用于电子设备,当用户希望在长曝光图像的基础上拍摄人、动物或者其他不是完全静止的前景目标时,可以将图像中的前景和背景进行分割,对背景进行长曝光处理,而不对前景照片进行长曝光处理,从而得到前景清晰而背景长曝光的图像,提高了图像处理效果和用户视觉体验;而不会出现现有技术那样,无差别的对前景和背景进行长曝光处理,当前景中存在人或者其他不是完全静止的前景目标时,会导致拍摄出的长曝光图像中前景目标出现模糊。
其中,对图像中的前景和背景进行分割可以采用图像分割的方法。图像分割也可以称为语义分割,是指把图像分成若干个特定的、具有特殊性质的区域并提出感兴趣目标的技术和过程。图像分割方法可以有多种,例如,基于卷积神经网络(convolutionalneural network,CNN)的分割方法、基于阈值的分割方法、基于区域的分割方法、基于边缘的分割方法以及基于特定理论的分割方法等。
本申请实施例提供的拍摄长曝光图像方法可以应用于手机、平板电脑、可穿戴设备、车载设备、增强现实(augmented reality,AR)/虚拟现实(virtual reality,VR)设备、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本、个人数字助理(personal digital assistant,PDA)等电子设备上,本申请实施例对电子设备的具体类型不作任何限制。
示例性的,图1示出了电子设备100的结构示意图。电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
可以理解的是,本申请实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
其中,控制器可以是电子设备100的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
I2C接口是一种双向同步串行总线,包括一根串行数据线(serial data line,SDA)和一根串行时钟线(derail clock line,SCL)。在一些实施例中,处理器110可以包含多组I2C总线。处理器110可以通过不同的I2C总线接口分别耦合触摸传感器180K,充电器,闪光灯,摄像头193等。例如:处理器110可以通过I2C接口耦合触摸传感器180K,使处理器110与触摸传感器180K通过I2C总线接口通信,实现电子设备100的触摸功能。
I2S接口可以用于音频通信。在一些实施例中,处理器110可以包含多组I2S总线。处理器110可以通过I2S总线与音频模块170耦合,实现处理器110与音频模块170之间的通信。在一些实施例中,音频模块170可以通过I2S接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。
PCM接口也可以用于音频通信,将模拟信号抽样,量化和编码。在一些实施例中,音频模块170与无线通信模块160可以通过PCM总线接口耦合。在一些实施例中,音频模块170也可以通过PCM接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。所述I2S接口和所述PCM接口都可以用于音频通信。
UART接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,UART接口通常被用于连接处理器110与无线通信模块160。例如:处理器110通过UART接口与无线通信模块160中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块170可以通过UART接口向无线通信模块160传递音频信号,实现通过蓝牙耳机播放音乐的功能。
MIPI接口可以被用于连接处理器110与显示屏194,摄像头193等外围器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI),显示屏串行接口(displayserial interface,DSI)等。在一些实施例中,处理器110和摄像头193通过CSI接口通信,实现电子设备100的拍摄功能。处理器110和显示屏194通过DSI接口通信,实现电子设备100的显示功能。
GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,GPIO接口可以用于连接处理器110与摄像头193,显示屏194,无线通信模块160,音频模块170,传感器模块180等。GPIO接口还可以被配置为I2C接口,I2S接口,UART接口,MIPI接口等。
USB接口130是符合USB标准规范的接口,具体可以是Mini USB接口,Micro USB接口,USB Type C接口等。USB接口130可以用于连接充电器为电子设备100充电,也可以用于电子设备100与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备,例如AR设备等。
可以理解的是,本申请实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的结构限定。在本申请另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过USB接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,外部存储器,显示屏194,摄像头193,和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A,受话器170B等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(codedivision multiple access,CDMA),宽带码分多址(wideband code division multipleaccess,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidounavigation satellite system,BDS),准天顶卫星系统(quasi-zenith satellitesystem,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
电子设备100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,电子设备100可以包括1个或N个显示屏194,N为大于1的正整数。
电子设备100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头193中。
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,电子设备100可以包括1个或N个摄像头193,N为大于1的正整数。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行电子设备100的各种功能应用以及数据处理。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。
电子设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。
扬声器170A,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170A收听音乐,或收听免提通话。
受话器170B,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时,可以通过将受话器170B靠近人耳接听语音。
麦克风170C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风170C发声,将声音信号输入到麦克风170C。电子设备100可以设置至少一个麦克风170C。在另一些实施例中,电子设备100可以设置两个麦克风170C,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备100还可以设置三个,四个或更多麦克风170C,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
耳机接口170D用于连接有线耳机。耳机接口170D可以是USB接口130,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of the USA,CTIA)标准接口。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。压力传感器180A的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180A,电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,电子设备100根据压力传感器180A检测所述触摸操作强度。电子设备100也可以根据压力传感器180A的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
陀螺仪传感器180B可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180B确定电子设备100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器180B检测电子设备100抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备100的抖动,实现防抖。陀螺仪传感器180B还可以用于导航,体感游戏场景。
气压传感器180C用于测量气压。在一些实施例中,电子设备100通过气压传感器180C测得的气压值计算海拔高度,辅助定位和导航。
磁传感器180D包括霍尔传感器。电子设备100可以利用磁传感器180D检测翻盖皮套的开合。在一些实施例中,当电子设备100是翻盖机时,电子设备100可以根据磁传感器180D检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态,设置翻盖自动解锁等特性。
加速度传感器180E可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
距离传感器180F,用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中,拍摄场景,电子设备100可以利用距离传感器180F测距以实现快速对焦。
接近光传感器180G可以包括例如发光二极管(LED)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。电子设备100通过发光二极管向外发射红外光。电子设备100使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定电子设备100附近有物体。当检测到不充分的反射光时,电子设备100可以确定电子设备100附近没有物体。电子设备100可以利用接近光传感器180G检测用户手持电子设备100贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器180G也可用于皮套模式,口袋模式自动解锁与锁屏。
环境光传感器180L用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180L也可用于拍照时自动调节白平衡。环境光传感器180L还可以与接近光传感器180G配合,检测电子设备100是否在口袋里,以防误触。
指纹传感器180H用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
温度传感器180J用于检测温度。在一些实施例中,电子设备100利用温度传感器180J检测的温度,执行温度处理策略。例如,当温度传感器180J上报的温度超过阈值,电子设备100执行降低位于温度传感器180J附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,电子设备100对电池142加热,以避免低温导致电子设备100异常关机。在其他一些实施例中,当温度低于又一阈值时,电子设备100对电池142的输出电压执行升压,以避免低温导致的异常关机。
触摸传感器180K,也称“触控面板”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
骨传导传感器180M可以获取振动信号。在一些实施例中,骨传导传感器180M可以获取人体声部振动骨块的振动信号。骨传导传感器180M也可以接触人体脉搏,接收血压跳动信号。在一些实施例中,骨传导传感器180M也可以设置于耳机中,结合成骨传导耳机。音频模块170可以基于所述骨传导传感器180M获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于所述骨传导传感器180M获取的血压跳动信号解析心率信息,实现心率检测功能。
按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入,产生与电子设备100的用户设置以及功能控制有关的键信号输入。
马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
SIM卡接口195用于连接SIM卡。SIM卡可以通过插入SIM卡接口195,或从SIM卡接口195拔出,实现和电子设备100的接触和分离。电子设备100可以支持1个或N个SIM卡接口,N为大于1的正整数。SIM卡接口195可以支持Nano SIM卡,Micro SIM卡,SIM卡等。同一个SIM卡接口195可以同时插入多张卡。所述多张卡的类型可以相同,也可以不同。SIM卡接口195也可以兼容不同类型的SIM卡。SIM卡接口195也可以兼容外部存储卡。电子设备100通过SIM卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,电子设备100采用eSIM,即:嵌入式SIM卡。eSIM卡可以嵌在电子设备100中,不能和电子设备100分离。
本申请实施例中,在拍摄场景下,摄像头193可以采集多张照片或者视频,ISP对摄像头193反馈的数据进行处理,处理器110可以从多张照片或者视频中确定待提取前景目标的一帧照片,处理器110中的NPU可以对这一帧照片进行图像分割,确定图像上不同物体以及不同物体类型分别所在的区域。处理器110可以确定其中某一个物体或者一片区域为前景目标,其他物体或者其他区域为背景,在生成长曝光图像时,对背景进行长曝光处理,而保留清晰的前景目标,从而得到前景清晰而背景长曝光的图像。
电子设备100的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本申请实施例以分层架构的Android系统为例,示例性说明电子设备100的软件结构。
图2是本申请实施例的电子设备100的软件结构框图。分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android系统分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(Android runtime)和系统库,以及内核层。应用程序层可以包括一系列应用程序包。
如图2所示,应用程序包可以包括相机,图库,日历,通话,地图,导航,WLAN,蓝牙,音乐,视频,短信息等应用程序。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图2所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
电话管理器用于提供电子设备100的通信功能。例如通话状态的管理(包括接通,挂断等)。
资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。
核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(media libraries),三维图形处理库(例如:OpenGL ES),2D图形引擎(例如:SGL)等。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D和3D图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
2D图形引擎是2D绘图的绘图引擎。
内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动。
在本申请实施例中,参见图2,系统库中还可以包括图像处理库。在启动相机应用后,相机应用可以获取到电子设备采集到的图像。在获得各物体分别所在的区域后,图像处理库可以从当前图像中确定一个或者多个物体所在的区域为前景目标,而出前景目标以外的其他区域为背景,从而在最终生成的长曝光图像中保留清晰的前景目标。
为了便于理解,本申请以下实施例将以具有图1和图2所示结构的手机为例,结合附图对本申请实施例提供的拍摄场景下的拍摄长曝光图像方法进行具体阐述。
图3示出了手机的一组图形用户界面(graphical user interface,GUI),其中,从图3中的(a)到图3中的(h)示出了从启动相机应用到得到背景流光、前景清晰的长曝光图像的过程。
本申请实施例中,背景流光可以理解为对待拍摄的对象中的背景所在的区域进行长曝光处理。例如,当背景是运动的物体(例如,车辆、水流等等)时,可以将运动物体的多帧图像合成得到的重叠显示效果。前景清晰可以理解为对待拍摄的对象中的前景所在的区域不进行长曝光处理,以避免因前景移动而导致的前景模糊。例如,当前景是人、动物或者其他不是完全静止的物体时,可以提取一帧图像中清晰的前景,或者,也可以将多帧图像合成一帧图像后,从合成的图像中提取清晰的前景。最后,将长曝光处理后的背景以及清晰的前景组合,得到背景流光而前景清晰的长曝光图像。
参见图3中的(a),该GUI为手机的桌面301。当手机检测到用户点击桌面301上的相机应用(application,APP)的图标302的操作后,可以启动相机应用,显示如图3中的(b)所示的GUI,该GUI可以称为拍摄界面303。该拍摄界面303上可以包括取景框304。在预览状态下,该取景框304内可以实时显示预览图像,当手机检测到用户点击拍摄控件306后,手机执行拍照操作,并将拍摄的照片保存下来,当手机检测到用户点击相册的图标307后,可以在触摸屏上展示已经拍摄的照片或者视频等。
可以理解的是,在手机检测到用户点击图标302的操作后,手机打开相机应用后默认在拍照模式下,该GUI界面上还包括录像模式、专业模式和更多模式,当手机检测到用户点击更多模式的图标305后,显示如图3中的(c)所示的GUI。
参见图3中的(c),该GUI下可以显示多种拍摄模式,当手机检测到用户点击流光快门的图标308的操作后,可以进入流光快门模式,显示如图3中的(d)所述的另一GUI。
参见图3中的(d),该GUI可以称为流光快门拍摄界面,其中,为了满足用户在不同拍摄场景下的拍摄要求,流光快门模式下又分了五种模式。这五种模式分别为:车水马龙、光绘涂鸦、丝绢流水、绚丽星空和背景流光。下面对这五种模式的适用场景进行简单介绍,如表1所示。
表1五种模式的适用场景
参见图3中的(d)所示,当手机检测到用户点击背景流光的图标309后,显示如图3中的(e)所示的另一GUI。
参见图3中的(e),在该GUI下,用户可以拍摄前景清晰而背景长曝光的图像,当手机检测到用户点击控件306的操作后,手机开启背景流光图像的拍摄,显示如图3中的(f)所示的GUI。参见图3中的(f),当手机再一次检测到用户点击控件306的操作后,手机停止拍摄,生成长曝光图像并保存在相册当中。
参考如图3中的(g)所示的GUI,当手机检测到用户点击相册的图标307的操作后,显示如图3中的(h)所示的GUI。
参见如图3中的(h),该GUI上呈现给用户最终得到的背景流光的图像。
在一种可能的实现方式中,如图3中的(e)所示的GUI上还可以显示对当前取景框中物体的分类,例如,可以显示对当前取景框中物体类别的分类(例如,该物体类别的分类可以是:人物、车辆、建筑等),或者,对当前取景框中物体个体的分类(例如,该物体个体的分类可以是:男孩、车辆、右侧的高楼、树木等),手机可以通过文字提示(或者语音提示)的方式提示用户选择清晰的目标,以作为最终生成的长曝光图像中的清晰的物体,例如,手机检测到用户点击物体个体的分类中的男孩时,手机可以确定用户希望男孩作为前景。当手机检测到用户点击到用户点击拍摄控件306的操作后,进行如图3中的(f)至图3中的(h)的操作。
以上结合图3描述了本申请实施例提供的拍摄长曝光图像的一组GUI。如图3中的(a)至(h)所示,手机可以在背景流光模式下生成前景清晰而背景长曝光的图像。
可选地,手机在选择前景时,可以任意或者基于一定的算法选择拍摄时长内的一帧图像中的物体或者多帧图像合成的图像中的物体所在的区域作为前景,而对除前景之外的其他区域作为背景进行长曝光操作。
以上结合图3中的GUI介绍了本申请实施例中的拍摄长曝光图像的过程,该实施例中,手机可以在拍摄的一段视频(或者多帧图像)中任意选择一帧图像,或者选择多帧处理后生成的图像中的前景目标作为最终生成的长曝光图像中的前景目标,而除前景以外的其他区域进行长曝光处理。
一种可能的实现方式中,手机可以从拍摄的一段视频(或者多帧图像)中选择一帧最美的图像,该过程可以参考US16131681,为了简洁,在此不再赘述。
另一种可能的实现方式中,手机可以默认从拍摄的一段视频(或者多帧图像)中选择第一帧图像,或者固定的某一帧图像中的前景目标作为最终生成长曝光图像中的前景目标。
另一种可能的实现方式中,手机可以根据用户的操作,选择前置摄像头或者后置摄像头进行拍摄,从而生成前景清晰而背景长曝光的图像。
应理解,本申请实施例中的所涉及的“前景”还可以理解为清晰的物体,即手机可以从一帧图像或者多帧图像合成的图像中选择第一区域内清晰的物体,而对拍摄的一段视频(或者多帧图像)中第二区域的物体进行长曝光处理,最后将第一区域内清晰的物体的图像和第二区域内长曝光的图像进行拼接,最终生成前景清晰而背景长曝光的图像。
还应理解,该前景清晰而背景长曝光的图像除了第一区域和第二区域以外还有可能存在其他区域,例如,该长曝光图像中还包括第三区域,第三区域为水印所在的区域。
还应理解,本申请实施例中,如图3中的(f)所示,手机在检测到用户再一次点击拍摄控件306的操作后,可以生成最终的长曝光图像并将其保存在相册中;也可以是手机将生成的长曝光图像以及拍摄长曝光图像时采集的视频都保存在相册中。
可选地,手机可以在检测到用户的第一操作后,选择一帧或者多帧图像作为提取前景目标的图像。
示例性的,如图4中的(a)所示,手机在启动相册后,可以通过触摸屏显示当前相册中保存有8张照片和4个视频,当手机检测到用户对视频401的预设手势后,显示如图4中的(b)所示的GUI,手机通过文字提醒(或者,语音提醒)的方式提醒用户“请选择需要处理的模式”。
例如,手机检测到用户在相册界面上对视频401的长按操作后,进入如图4中的(b)所示的GUI。
又例如,手机检测到用户在相册界面上对视频401的压力按操作(例如,按压的力度大于或者等于预设值)后,进入如图4中的(b)所示的GUI。
又例如,手机检测到用户在相册界面上对视频401的单击操作后,进入如图4中的(b)所示的GUI。
又例如,手机检测到用户在相册界面上对视频401的双击操作后,进入如图4中的(b)所示的GUI。
又例如,手机检测到用户在相册界面上对视频401划了一个圆圈轨迹的手势操作后,进入如图4中的(b)所示的GUI。又例如,手机检测到用户在相册界面上对视频401进行拖拽的手势操作后,进入如图4中的(b)所示的GUI。
参见图4中的(b)所示的GUI,相册界面上的处理模式包括用于指示进入背景流光模式的控件402、进入色彩保留模式的控件以及删除的控件。当手机检测到用户点击该控件402的操作后,显示如图4中的(c)所示的GUI。
参见图4中的(c),手机进入背景流光模式,可以通过文字提醒(或者语音提醒)的方式提醒用户“请点击播放视频,以选择清晰的目标”。当手机检测到用户点击开始播放的控件403后,开始播放视频401,显示如图4中的(d)所示的GUI。
参见图4中的(d),视频在播放的过程中,进度条405在一直向右移动。当手机检测到用户点击暂停播放的控件406后,手机停止对视频401的播放,在触摸屏上显示该视频401在第6秒处的图像。
参见图4中的(e),当手机检测到用户点击控件404的操作后,可以确定该视频401在第6秒处的图像为提取前景目标的图像1。
又例如,在暂停对该视频401的播放后,手机检测到用户拖动进度条405的操作后,可以实时地变化触摸屏上的图像,当检测到用户点击控件404的操作后,确定进度条当前所在位置对应的图像为提取前景目标的图像1。
示例性的,当手机检测到用户对视频401的预设手势后,显示如图5中的(a)所示的GUI。
参见图5中的(a),该GUI包括用于从视频中截取图像的图标502。当手机检测到用户点击开始播放的控件403后,开始播放视频401,显示如图5中的(b)所示的GUI。
参见图5中的(b),当手机检测到用户点击暂停播放的控件503后,手机停止对视屏401的播放。
参见图5中的(c),当手机检测到用户点击图标502的操作后,可以确定该图像为提取前景目标的图像1。
参见图5中的(d),当手机提取前景目标的图像1后,手机可以通过触摸屏显示对该图像1的物体的分类信息,如图5中的(d)所示,手机可以基于AI自动识别出该图像1中的物体包括:男孩、车辆、树木以及高楼。当手机检测到用户点击男孩的操作后,可以确定图形1中的男孩为前景目标。
应理解,如图4中的(e)所示,当手机检测到用户点击控件404的操作后,可以确定提取前景目标的图像1,手机也可以通过触摸屏显示对该图像1的物体的分类信息,显示如图5中的(d)所示的GUI。
可选地,该图像1可以为该视频401中的1帧图像,或者,该图像1也可以为该视频401中的多帧图像合成的图像,例如,该图像1可以是该视频401中的多种图像采用HDR方式合成的图像。
示例性的,当手机确定图像1为提取前景目标的图像后,手机可以将图像1,以及图像1的前后两帧图像进行HDR合成得到处理后的图像,并从该图像中提取前景目标。
可选地,手机在检测到用户的第二操作后,可以从该图像1中提取前景目标,或者,也可以从多帧图像合成的图像中提取前景目标。
以上图5中的(d)示出了手机在确定图像1后自动将图像1中的物体进行分类,下面结合图6至图7所示的GUI,对另一些确定图像1中的前景目标的过程进行说明。
在一个实施例中,前景目标可以是手机预设的目标对象。例如,前景目标是手机预设的物体类型“人物”,或者,前景目标是手机预设的其他物体类型。在该实施例中,在手机从该图像中选择前景目标时,手机可以根据预设的目标对象对该图像1进行处理,得到该前景目标,并通过文字提醒(或者语音提醒的方式)提醒用户确定。
示例性的,预设的目标对象为物体类型“人物”,手机可以通过文字信息提示用户“当前处于背景流光模式,默认选择人物为前景目标”,并显示如图6中的(a)所示的图像2。在图像2中,由于男孩属于“人物”类型,因而男孩所在区域602(图中斜线填充区域)可以作为前景目标所在的区域,区域602以外的区域可以作为背景所在的区域。
在另一实施例中,前景目标可以是手机根据摄像头采集到的原始图像上的物体、物体的位置或物体的尺寸等自动确定的目标对象。在该实施例中,在选择图像1中的前景目标时,手机可以根据自动确定的前景目标显示图像2。
例如,手机上设置有多个前景目标对应的物体类型的优先级顺序:人物高于动物,动物高于其他不静止的物体,其他不静止的物体高于静止的物体。示例性的,若提取前景目标的图像上包括人物、动物和建筑,则优先级最高的物体类型人物为前景目标,或者优先级最高的两个物体类型人物和动物为前景目标。再示例性的,若提取前景目标的图像上不包括人物,而包括动物和其他物体,则提取前景目标的图像上包括的优先级最高的动物为前景目标。
再例如,手机可以自动确定提取前景目标的图像上的待拍摄主体,待拍摄主体即为前景目标,或者待拍摄主体所属的物体类型即为前景目标。示例性的,手机确定提取前景目标的图像上位于中间位置的物体为待拍摄主体和前景目标。再示例性的,手机确定提取前景目标的图像上尺寸最大的物体为待拍摄主体和前景目标。再例如,手机确定靠近中间位置且尺寸最大的物体为待拍摄主体,靠近中间位置且尺寸最大的物体所属的物体类型为前景目标。
在另一个实施例中,手机可以在检测到用户预设的手势后,确定该图像1中的前景目标。
例如,参见图6中的(b)所示的GUI,当手机检测到用户点击魔法棒控件603的操作后,可以继续检测用户在取景框内显示的图像1上勾勒的区域604,并将区域604确定为前景目标所在的区域。
又例如,参见图6中的(c)所示的GUI,手机检测到用户在取景框内显示的图像1上划了一个圆圈轨迹的手势操作后,可以确定将该圆圈轨迹中区域作为前景目标所在的区域。
又例如,参见图6中的(d)所示的GUI,手机检测到用户在取景框内显示的图像1上点击某一个物体,可以确定将该物体作为前景目标。
又例如,在手机检测到用户在取景框内显示的图像上,点击多个物体(例如,男孩和树木后,该多个物体(男孩和树木)即为前景目标。其中,该多个物体可以属于同一物体类型,也可以属于不同的物体类型。
可选地,手机可以对该图像1中的物体通过物体类别或者物体个体进行分类,通过文字提示用户分类信息,当手机检测到用户点击某一物体类别或者某一物体个体的操作后,可以确定该物体类别或者该物体个体为前景目标。
例如,参见图7中的(a),手机在拍摄界面上显示物体类型列表,该物体类型列表中可以包括多个物体类型(例如可以包括取景框内当前显示的图像上包括的物体类型)。当手机检测到用户点击选择某一个物体类型(例如人物)的操作时,该物体类型即为前景目标。
又例如,参见图7中的(b),手机在拍摄界面上显示物体列表,当手机检测到用户点击选择某个物体(或某几个物体)的操作时,用户所选择的物体即为前景目标。
再例如,手机在拍摄界面上显示物体类型列表和物体列表,当手机检测到用户点击选择某个物体类型或物体的操作时,用户所选择的物体类型或物体即为前景目标。
再例如,在手机取景框内显示的图像上,每个物体都具有编号,当手机检测到用户点击某个物体的编号的操作时,该物体即为前景目标。
一个实施例中,当手机确定图像1上的前景目标后,还可以对该前景目标进行进一步处理。
示例性的,如图8所示的GUI,该GUI可以称为前景目标处理界面,该界面上包括多个对前景目标的处理模式:修剪、色彩保留、滤镜和高动态范围图像(high dynamic range,HDR)等,当手机检测到用户点击某一处理模式的图标的操作后,可以对该前景目标进行相应的处理操作。
示例性的,以HDR为例,当用户选择进行HDR处理时,手机可以选择当前图像以及当前的图像的前后两帧图像进行HDR处理,例如,当前图像为视频401(假设该视频包括240帧图像)中的第151帧图像,则手机可以选择视频401中的第150帧、第151帧以及第152帧图像进行HDR合成,并从最终合成的HDR图像中选择出前景目标。
HDR相比于普通的图像,可以提供更多的动态范围和图像细节,根据不同的曝光时间的低动态范围图像(low dynamic range,LDR)图像,利用每个曝光时间对应最佳细节的LDR图像来合成最终的HDR图像,能够更好的反应真实环境中的视觉效果。
可选地,当从该图像1中选择出前景目标或者对前景目标处理完成后,手机开始生成长曝光图像。其中,手机保留前景目标或者处理后的前景目标,而对前景目标以外的其他区域的物体进行长曝光处理,最终得到前景清晰而背景长曝光的图像。
示例性的,参见图9中(a)所示的GUI,手机可以通过文字提醒的方式提醒用户“对前景目标处理完毕,开始生成背景流光图像?”。
当手机检测到用户点击控件901的操作后,手机开始生成长曝光图像,并显示如图9中的(b)所示的GUI,该GUI上包括最终生成的长曝光图像,即图像3。
一个实施例中,手机还可以通过相机应用中的专业模式生成前景清晰而背景流光的长曝光图像。
当用户希望拍摄长曝光图像时,除了可以在流光快门下选择以上五种模式,还可以在专业模式下进行长曝光图像的拍摄。下面对专业模式下拍摄长曝光照片时的几个参数作简单介绍,表2示出了与拍摄长曝光图像相关的参数及其作用。
表2与长曝光图像相关的参数及其作用
用户可以根据不同的场景调整上表中的参数值,从而实现长曝光图像的拍摄。例如,在光线充足的时候,可以采用较低的ISO进行拍摄;在光线昏暗的时候,可以采用较高的ISO进行拍摄。
示例性的,如图10中的(a)所示的GUI,当手机检测到用户点击专业模式的图标1001后,手机进入专业模式。
在专业模式下,当手机检测到用户用于指示背景流光模式的操作后,手机进入背景流光模式。其中,在专业模式下,用户指示背景流光模式的方式可以有多种。
在一个实施例中,拍摄界面上包括用于指示背景流光模式的第一控件,当手机检测到用户点击该第一控件的操作时,手机进入背景流光模式。示例性的,该第一控件可以为图10中的(b)所示的控件1002,或者图5中的(c)所示的控件1003。
在另一实施例中,参见图11中的(a),拍摄界面上包括魔法棒控件1101。在手机检测到用户点击控件1101的操作后,参见图11中的(b),手机显示功能列表1102,该功能列表1102包括用于指示背景流光模式的控件1103、用于指示滤镜的控件以及其他控件等。在手机检测到用户点击控件1103的操作后,手机进入背景流光模式。
在另一个实施例中,参见图12中的(a),手机检测到摄像头中采集的当前图像中包括人、动物或者其他不是完全静止的物体时,可以通过文字提醒的方式提醒用户是否进入背景流光的拍摄模式,手机可以拍摄界面上通过文字(或者语音提醒)提醒用户“检测到人物,是否进入背景流光模式?”,当手机检测到用户点击控件1202后,手机进入背景流光模式。
示例性的,用户还可以通过文字(或者语音提醒)提醒用户当前摄像头采集的图像中包括人物、动物或者其他不是完全静止的物体。如果用户此时并不希望拍摄的图像中有人物、动物或者其他不是完全静止的物体时,可以点击控件1201。手机在检测到用户点击控件1201的操作后,取消进入背景流光模式,而进行正常的长曝光处理,即对图像中所有物体都进行长曝光处理。
示例性的,手机检测到摄像头采集的图像中位于中间位置的物体为人、动物或者其他不是完全静止的物体时,通过文字提醒(或者语音提醒)的方式提醒用户是否进入背景流光模式。
再示例性的,手机检测到摄像头采集的图像中人、动物或者其他不是完全静止的物体的尺寸大于预设的尺寸阈值时,通过文字提醒(或者语音提醒)的方式提醒用户是否进入背景流光模式。
在另一个实施例中,手机在拍摄界面上检测到用户的预设手势后,进入背景流光模式。例如,参见图12中的(b),手机检测到用户在拍摄界面上划了一个圆圈轨迹的手势操作后,进入背景流光模式。
再例如,手机检测到用户在拍摄界面上的取景框内的长按操作后,进入背景流光模式。
再例如,手机检测到用户在在拍摄界面上的取景框内的压力按操作(按压的力度大于或者等于预设值)后,进入背景流光模式。
在另一实施例中,在手机显示拍摄界面后,参见图12中的(c),若手机检测到用户语音指示进入背景流光模式或使用背景流光功能的操作,则进入背景流光模式。
手机在首次或每次进入背景流光模式后,可以通过在触摸屏上显示或通过声音的方式给用户以提示说明,以告知用户背景流光模式的功能和作用。
例如,手机可以通过显示文字信息提示用户“进入该模式后,您可以保留清晰的前景目标,其他区域进行长曝光处理”。
再例如,参见图12中的(d),手机可以通过窗口1203来提示用户,当摄像头采集的图像中包括人、动物或者其他不是完全静止的物体时,手机可以在拍摄界面上显示窗口1203。在窗口1203中,手机以文字提醒的方式告知用户“在拍摄对象包括人、动物或者其他不是完全静止的物体时,不使用背景流光模式和使用背景流光模式的区别”。
在另一个实施例中,参见图13中的(a),手机在检测到用户点击图标1301的操作时,手机可以在通过拍摄界面显示窗口1302,用于用户设置长曝光参数(例如,感光度“ISO”和曝光时间“S”)。
参见图13中的(b),当手机检测到用户点击控件1303的操作后,手机可以确定用户选择的感光度为400,曝光时间为8s。
可以理解的是,本申请实施例中,手机可以根据摄像头检测到的图像自动设定合适的长曝光参数。如果用户希望修改当前的自动设定的长曝光参数,用户可以点击图标1301。当手机检测到用户点击图标1301的操作并修改窗口1302中的参数时,手机可以将用户设定的修改后的长曝光参数显示在拍摄界面上。
参见图13中的(c),当手机检测到用户点击拍摄控件的操作后,开始在背景流光的模式下生成长曝光图像,长曝光时间为8s,并显示如图13中的(d)所示的GUI。
参见图13中的(d),该GUI上包括最终生成的前景清晰而背景长曝光的图像3。
一个实施例中,手机还可以对多张照片进行长曝光处理,生成前景清晰而背景长曝光的图像。
示例性的,参见图14所示的(a),手机在启动相册后,可以通过触摸屏显示当前相册中保存有“8张照片和4个视频”,当手机检测到用户对照片1401的预设手势后,显示如图14中的(b)所示的GUI。
例如,手机检测到用户在相册界面上对照片1401的长按操作后,进入如图14中的(b)所示的GUI。
又例如,手机检测到用户在在相册界面上对照片1401的压力按操作(按压的力度大于或者等于预设值)后,进入如图14中的(b)所示的GUI。
参见图14中的(b)所示的GUI,相册界面上包括用于指示进入背景流光模式的控件1402、进入色彩保留模式的控件以及删除的控件。当手机检测到用户点击该控件1402的操作后,显示如图14中的(c)所示的GUI。
参见图14中的(c),手机进入背景流光模式,可以通过文字提醒(或者语音提醒)的方式提醒“请选择多张照片,生成背景流光图像”。
参见图14中的(d)所示的GUI,手机可以检测到用户选中了其中的五种照片,当手机检测到用户点击控件1403的操作后,显示如图14中的(e)所示的GUI。
参见图14中的(e),手机可以通过文字提醒的方式提醒用户“确定从当前照片中选择前景目标”,当手机检测到用户点击控件1404的操作后,确定从当前照片中选择前景目标。
应理解,当选择出照片后,手机可以基于用户的操作在该照片中确定前景目标并最终生成背景流光的图像,其过程可以参考上述图6至图9中的GUI,为了简洁,在此不再赘述。
在一实施例中,在锁屏状态下,或者,在桌面上,手机在检测到用户的其他预设手势(例如用户用手指划动“R”的轨迹)后,可以直接打开相机应用并进入背景流光模式。
在一实施例中,在背景流光模式下,手机在完成当前拍摄操作(例如,拍摄了一张照片或完成视频拍摄)后,可以自动退出背景流光模式。
在另一实施例中,在背景流光模式下,手机在完成当前拍摄后,仍然处于背景流光模式。在退出相机应用后,手机可以自动退出背景流光模式。
在另一实施例中,在背景流光模式下,手机在检测到用户通过语音或手势操作指示退出背景流光模式后,可以退出背景流光模式。示例性的,在背景流光模式下,若手机检测到用户点击返回(back)控件的操作,则退出背景流光模式。
再示例性的,在背景流光模式下,当拍摄界面上显示有用于标识背景流光模式的控件时,若手机检测到用户向手机触摸屏外拖动该控件的操作,则手机退出背景流光模式。若手机上次退出相机时未退出背景流光模式,则在本次打开相机应用后,手机可以直接进入背景流光模式。
以上结合图1至图14,描述了本申请实施例中拍摄长曝光图像方法中GUI,下面结合图15和图16,描述本申请实施例涉及的算法过程。
图15示出了本申请实施例的拍摄长曝光图像的算法1500的示意性流程图,如图15所示,该算法1500的具体流程如下:
S1501,开始拍摄。
示例性的,如图3中的(e)所示,当手机在背景流光模式下检测到用户点击控件306的操作后,手机开始进行拍摄。
示例性的,如图13中的(c)所示,当手机在背景流光模式下检测到用户点击控件306的操作后,手机开始进行拍摄。
S1502,拍摄获得视频(或者多帧图像)。
示例性的,如图3中的(f)所示,当手机检测到用户再一次点击控件306的操作后,该手机的摄像头停止视频采集,获得视频(或者多帧图像)。若每一秒中包括30帧图像,则拍摄的8秒视频中包括240帧图像。
S1503,基于AI确定第一区域。
示例性的,手机可以从拍摄的8秒视频(或者240帧图像)中选择某一帧图像作为提取第一对象的图像。例如,手机默认选择第一帧图像作为提取第一对象的图像,并从该第一帧图像中选择出清晰的第一对象,如图3中的(e)所示,手机可以选择点击控件306时的取景框中的图像作为提取第一对象的图像。
示例性的,手机从第一帧图像中选择第一对象的过程可以基于图像分割,对分割出的图像,手机可以根据预设的选择第一对象的优先级顺序识别出该第一对象,例如,手机预设的第一对象的优先级顺序为人、动物、其他不是完全静止的物体。当手机基于图像分割确定该第一帧图像中包括男孩时,可以将该男孩所在的区域为第一区域。
S1504,基于用户的操作,确定第一区域。
示例性的,如图4至图7所示的GUI,手机可以基于用户的操作先从视频中选择一帧图像作为提取第一对象的图像,再基于用户的操作,从该图像中选择清晰的第一对象,该第一对象所在的区域即为第一区域。
应理解,S1503可以在用户想要拍摄长曝光图像时,基于手机内部的算法(例如图像分割、优先级排序等等)自动生成长曝光图像。S1504可以是用户之前拍摄好了一段视频,之后用户希望自己选择第一对象,手机可以基于用户的操作最终生成长曝光图像。
S1505,提取第一区域的图像。
示例性的,在S1503或者S1504确定了第一对象后,手机可以进行第一对象的提取。
S1506,确定第二区域。
S1507,对第二区域中的多帧图像进行防抖处理。
例如,可以对相邻的两帧图像进行匹配,来实现相邻帧之间的运动补偿。
S1508,对该视频(或者多帧图像)中的第二区域进行长曝光处理。
示例性的,手机可以多帧图像中除第一区域以外的其他区域进行长曝光处理。
S1509,拍摄结束,生成长曝光图像。
示例性的,手机可以第一区域中清晰的第一图像和第二区域中的长曝光图像进行组合,最终生成人物清晰而背景长曝光的图像。
应理解,对于第二区域的长曝光处理,第二区域中的部分区域长曝光处理时可能用到了视频所包含的所有图像,另一部分区域可能用到了视频所包含的所有图像中的部分图像。
图16示出了本申请实施例提供的长曝光图像的生成过程的示意图,如图16所示,假设拍摄的视频中包含3帧图像(应理解,此处仅仅以3帧图像为例进行说明,实际拍摄过程中一段视频中的帧数可能很多,其过程可以参考3帧图像生成长曝光图像的过程)。
在第一帧图像中人物在画面的左侧(区域A),在第二针图像中人物在画面的中间位置(区域B),在第三帧图像中人物在换面的右侧(区域C),除区域A、区域B、区域C以外的区域为区域D。假设手机选择了从第二帧图像中提取清晰的人物,即最终生成的长曝光图像中的区域B实际使用了第二帧图像的区域B。在对第二区域的长曝光处理过程中,区域A的长曝光处理过程中实际上使用了第二帧图像和第三帧图像中区域A的图像;区域C的长曝光处理过程中实际上使用了第一帧图像和第二帧图像中区域C的图像;而区域D的长曝光处理过程中实际上使用了第一帧图像、第二帧图像和第三帧图像中区域D的图像。
即,最终生成的长曝光图像中,区域B由一帧图像得到,区域A由2帧图像得到,区域C由2帧图像得到,区域D由3帧图像得到。
上文已提到,手机进行图像分割的算法可以有多种,此处以采用基于CNN的深度学习算法进行图像分割为例进行说明。
基于该算法,手机在获得摄像头采集到的原始图像后,可以将原始图像进行下采样,转换为分辨率较低的图像进行CNN的复杂计算,以降低运算量。举例来说,参见图17,原始图像为图像1701,图像分割的单位为物体类型,该物体类型包括天空、人物、绿植和背景。手机将原始图像的M x N尺寸(即分辨率为M x N)处理为m x n尺寸,m小于M,且n小于N。手机通过卷积与下采样操作(包括但不限于stride卷积、池化pooling等),逐层提取图像的语义特征,得到尺寸分别为m1 x n1,m2 x n2,m3 x n3的多尺度特征图1702,其中m1,m2,m3成倍数关系且小于m;n1,n2,n3成倍数关系且小于n。而后,手机通过卷积与上采样操作,对上一步得到的多尺度特征图1702进行融合,得到尺寸为m1 x n1的融合后的特征图1703。之后,手机对融合后的特征图1703做卷积计算,计算出各个对象在每个像素点上的分割分值,得到4张分数图1704,分别与天空、人物、绿植和背景对应,分数图的尺寸为m1 x n1。对上一步获得的4张分数图分别进行上采样操作,得到尺寸为m x n的4张分数图1705。逐像素点比较4张分数图上相应像素点的分割分值,取最大分割分值所在分数图对应的物体类型为当前像素点对应的物体类型,从而获得每个像素点分别对应的物体类型,即获得mask图1706(尺寸为m x n)。在mask图1706中,不同物体类型所在的区域具有不同的标记,例如不同物体类型所在区域的颜色不同。
在得到mask图后,将mask图上采样为与原始图像相同的M x N尺寸,这样可以对比mask图获得原始图像上不同物体类型对应的像素区域。逐个判断原始图像上的像素点是否在目标对象所在的区域内,若在目标对象所在的区域内,则手机保留该区域内的前景目标;若不在目标对象所在的区域内,则手机将该不在目标对象所在的区域内的图像进行长曝光处理。这样,目标对象所在的区域为清晰的前景目标,目标对象所在区域以外的区域为长曝光图像。后续,手机可以对经过上述处理后的图像进行编码等处理,并显示在拍摄界面上。
需要说明的是,以上所举示例是以图像分割的单位为物体类型为例进行说明的,图像分割的单位还可以是物体。这样,通过图像分割可以获得原始图像上每个物体所在的区域,从而可以根据每个物体所在的区域,将目标对象(可以对应一个或多个物体)所在区域保留清晰的前景目标,而将目标对象所在区域以外的区域进行长曝光处理得到长曝光图像。
结合上述实施例及相关附图,本申请实施例提供了一种拍摄长曝光图像的方法,该方法可以在如图1、图2所示的具有触摸屏和摄像头的电子设备(例如手机、平板电脑等)中实现。如图18所示,该方法可以包括以下步骤:
S1801,显示第一界面,第一界面为电子设备的相机界面。
示例性的,该第一界面为图3中的(b)所示的相机界面。
可选地,显示第一界面之前,方法还包括:
在电子设备的桌面上检测到用户用于指示打开相机应用的第五操作。
示例性的,如图3中的(a)所示,该第五操作可以为用户点击图标302的操作后,当手机检测到用户点击图标302的操作后,手机进入如图3中的(b)所示的相机界面。
S1802,在第一界面上检测到用户的第一操作。
示例性的,如图3中的(e)所示,该第一操作可以为用户点击拍摄控件306的操作。
示例性的,如图13中的(c)所示,该第一操作可以为用户点击拍摄控件306的操作。
S1803,响应于第一操作,获得多帧图像。
示例性的,如图3中的(f)所示,用户拍摄了时长为8秒的视频后,该多帧图像为该视频,或者为该视频所包含的图像。
S1804,在第一界面上检测到用户的第二操作。
示例性的,如图3中的(g)所示,该第二操作为用户点击相册307的操作。
示例性的,如图13中的(c)所示,该第二操作为用户点击相册307的操作。
S1805,响应于第二操作,显示第一图像;其中,第一图像包括第一区域和第二区域,第一区域内包括由电子设备识别的第一对象,第一对象由多帧图像中第一帧数的图像得到,第一帧数的图像的第一区域包括第一对象,第二区域的图像由多帧图像中第二帧数的图像得到;第一帧数小于第二帧数。
示例性的,如图3中的(h)所示,该第一图像为图3中的(h)显示的图像310。
示例性的,如图13中的(d)所示,该第一图像为图13中的(d)显示的图像1303。
在步骤1801-步骤1805描述的方案中,在进入长曝光图像的处理模式时,电子设备可以将拍摄的视频(多帧图像)中选择一帧提取第一对象,或者,几帧图像合成的图像中提取第一对象,从而保证第一对象的在最终得到的长曝光图像中清晰,而不会出现现有技术那样在待拍摄的对象包括人或者其他不是完全静止的物体时,对图像中所有物体进行无差别的长曝光而导致人或者其他物体产生模糊,因而可以提高图像处理效果和图像显示效果。
可选地,第二区域的图像由第二帧数的图像经过长曝光处理得到。
如图3中的(h)显示的图像310,或者,如图13中的(d)显示的图像1303,电子设备可以对除男孩以外的其他区域的物体进行长曝光处理,可以看出,男孩左侧和男孩右侧的车辆出现车水马龙的长曝光效果。
可选地,第一帧数的图像包括第二图像,第二图像包括该第一对象。
可选地,该第一对象由第一对象由多帧图像中第一帧图像得到。
示例性的,如图3中的(e)所示,该第二图像可以为手机将用户点击控件306那一时刻的图像,即拍摄采集视频的第一帧图像作为提取第一对象(即图中的男孩)的图像,可以看出图像310中的男孩来自于图3中(e)所示的图像中的男孩。
可选地,在第一界面上检测到用户的第一操作之前,方法还包括:
在第一界面上检测到用户的第三操作;
响应于第三操作,进入第一界面的第二处理模式,第二处理模式为多种长曝光处理模式中的一种。
示例性的,该第三操作为检测到用户语音提示进入该第二处理模式的操作。
可选地,第一界面上包括第二处理模式的控件,第三操作为用户点击控件的操作。
示例性的,该第一界面上包括多种长曝光处理模式,如图3中的(d)所示,该第一界面下包括车水马龙、光绘涂鸦、丝绢流水、绚丽星空和背景流光五种长曝光处理模式,这五种模式适用于不同的拍摄场景下,具体的场景可以参考上文中的描述。该第三操作可以为用户点击图标309的操作,当手机检测到用户点击图标309的操作后,手机进入背景流光的长曝光拍摄模式。
示例性的,如图10所示的(b),该第二处理模式的控件为控件1002,该第三操作为点击控件1002的操作。
示例性的,如图10所示的(c),该第二处理模式的控件为控件1003,该第三操作为点击控件1003的操作。
示例性的,如图11所示的(b),该第二处理模式的控件为控件1102,该第三操作为点击控件1102的操作。
示例性的,如图12所示的(a),该第二处理模式的控件为控件1202,该第三操作为点击控件1202的操作。
可选地,该第三操作为预设手势。
示例性的,如图12中的(b)所示,当手机在触摸屏上检测到用户的预设手势后,手机进入背景流光的长曝光拍照模式。
可选地,该第三操作为用户语音提示进入背景流光模式。
示例性的,如图12中的(c)所示,当手机检测到用户语音提示“进入背景流光模式”后,手机进入背景流光模式。
可选地,响应于第一操作,获得多帧图像,包括:
响应于第一操作,开始进行拍摄。
示例性的,如图3中的(e),该第一操作为用户点击控件306的操作。
在第一界面上检测到用户用于指示停止拍摄的第四操作。
示例性的,如图3中的(f)所示,该第四操作为用户再一次点击控件306的操作。
响应于第四操作,获得多帧图像。
可选地,显示第一界面之前,方法还包括:
在电子设备的桌面上检测到用户用于指示打开相机应用的第五操作。
示例性的,如图3中的(a)所示,该第五操作为用户点击图标302的操作。
可选地,第一对象为预设的目标对象。
可选地,第一对象包括人或者动物。
可以理解的是,电子设备为了实现上述功能,其包含了执行各个功能相应的硬件和/或软件模块。结合本文中所公开的实施例描述的各示例的算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。本领域技术人员可以结合实施例对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本实施例可以根据上述方法示例对电子设备进行功能模块的划分,例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块可以采用硬件的形式实现。需要说明的是,本实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
在采用对应各个功能划分各个功能模块的情况下,图19示出了上述实施例中涉及的电子设备1900的一种可能的组成示意图,如图19所示,该电子设备1900可以包括:显示单元1901、获取单元1902和检测单元1903。
其中,显示单元1901可以用于支持电子设备1900执行上述步骤1801和步骤1805等,和/或用于本文所描述的技术的其他过程。
检测单元1902可以用于支持电子设备1900执行上述步骤1802和步骤1804等,和/或用于本文所描述的技术的其他过程。
获取单元1903可以用于支持电子设备1900执行上述步骤1803等,和/或用于本文所描述的技术的其他过程。
需要说明的是,上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应功能模块的功能描述,在此不再赘述。
本实施例提供的电子设备,用于执行上述拍摄长曝光图像的方法,因此可以达到与上述实现方法相同的效果。
在采用集成的单元的情况下,电子设备可以包括处理模块、存储模块和通信模块。其中,处理模块可以用于对电子设备的动作进行控制管理,例如,可以用于支持电子设备执行上述显示单元1901、检测单元1902和获取单元1903执行的步骤。存储模块可以用于支持电子设备执行存储程序代码和数据等。通信模块,可以用于支持电子设备与其他设备的通信。
其中,处理模块可以是处理器或控制器。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框,模块和电路。处理器也可以是实现计算功能的组合,例如包含一个或多个微处理器组合,数字信号处理(digital signal processing,DSP)和微处理器的组合等等。存储模块可以是存储器。通信模块具体可以为射频电路、蓝牙芯片、Wi-Fi芯片等与其他电子设备交互的设备。
在一个实施例中,当处理模块为处理器,存储模块为存储器时,本实施例所涉及的电子设备可以为具有图1所示结构的设备。
本实施例还提供一种计算机存储介质,该计算机存储介质中存储有计算机指令,当该计算机指令在电子设备上运行时,使得电子设备执行上述相关方法步骤实现上述实施例中的拍摄长曝光图像的方法。
本实施例还提供了一种计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行上述相关步骤,以实现上述实施例中的拍摄长曝光图像的方法。
另外,本申请的实施例还提供一种装置,这个装置具体可以是芯片,组件或模块,该装置可包括相连的处理器和存储器;其中,存储器用于存储计算机执行指令,当装置运行时,处理器可执行存储器存储的计算机执行指令,以使芯片执行上述各方法实施例中的拍摄长曝光图像的方法。
其中,本实施例提供的电子设备、计算机存储介质、计算机程序产品或芯片均用于执行上文所提供的对应的方法,因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
通过以上实施方式的描述,所属领域的技术人员可以了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个装置,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是一个物理单元或多个物理单元,即可以位于一个地方,或者也可以分布到多个不同地方。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若干指令用以使得一个设备(可以是单片机,芯片等)或处理器(processor)执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上内容,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。
Claims (15)
1.一种拍摄长曝光图像的方法,应用于电子设备,其特征在于,包括:
显示第一界面,所述第一界面为所述电子设备的相机界面;
在所述第一界面上检测到用户的第一操作;
响应于所述第一操作,获得多帧图像;
在所述第一界面上检测到用户的第二操作;
响应于所述第二操作,显示第一图像;
其中,所述第一图像包括第一区域和第二区域,所述第一区域内包括由所述电子设备识别的第一对象,所述第一对象由所述多帧图像中的第二图像得到,所述第二图像的第一区域包括所述第一对象,所述第二区域的图像由所述多帧图像得到;
其中,所述第二区域的图像由所述多帧图像得到,包括:所述第二区域的图像由所述多帧图像的第二区域经过防抖处理和长曝光处理得到。
2.根据权利要求1所述的方法,其特征在于,所述在所述第一界面上检测到用户的第一操作之前,所述方法还包括:
在所述第一界面上检测到用户的第三操作;
响应于所述第三操作,进入所述第一界面的第一处理模式,所述第一处理模式为多种长曝光处理模式中的一种。
3.根据权利要求2所述的方法,其特征在于,所述第一界面上包括所述第一处理模式的控件,所述第三操作为用户点击所述控件的操作。
4.根据权利要求1所述的方法,其特征在于,所述响应于所述第一操作,获得多帧图像,包括:
响应于所述第一操作,开始进行拍摄;
在所述第一界面上检测到用户用于指示停止拍摄的第四操作;
响应于所述第四操作,获得所述多帧图像。
5.根据权利要求1所述的方法,其特征在于,所述显示第一界面之前,所述方法还包括:
在所述电子设备的桌面上检测到所述用户用于指示打开相机应用的第五操作。
6.根据权利要求1所述的方法,其特征在于,所述第一对象为预设的目标对象。
7.根据权利要求6所述的方法,其特征在于,所述第一对象包括人或者动物。
8.一种电子设备,其特征在于,包括:一个或多个处理器;存储器;多个应用程序;以及一个或多个程序,其中所述一个或多个程序被存储在所述存储器中,当所述一个或者多个程序被所述处理器执行时,使得所述电子设备执行以下步骤:
显示第一界面,所述第一界面为所述电子设备的相机界面;
在所述第一界面上检测到用户的第一操作;
响应于所述第一操作,获得多帧图像;
在所述第一界面上检测到用户的第二操作;
响应于所述第二操作,显示第一图像;
其中,所述第一图像包括第一区域和第二区域,所述第一区域内包括由所述电子设备识别的第一对象,所述第一对象由所述多帧图像中的第二图像得到,所述第二图像的第一区域包括所述第一对象,所述第二区域的图像由所述多帧图像得到;
其中,所述第二区域的图像由所述多帧图像得到,包括:所述第二区域的图像由所述多帧图像的第二区域经过防抖处理和长曝光处理得到。
9.根据权利要求8所述的电子设备,其特征在于,当所述一个或者多个程序被所述处理器执行时,使得所述电子设备执行以下步骤:
在所述第一界面上检测到用户的第三操作;
响应于所述第三操作,进入所述第一界面的第一处理模式,所述第一处理模式为多种长曝光处理模式中的一种。
10.根据权利要求9所述的电子设备,其特征在于,所述第一界面上包括所述第一处理模式的控件,所述第三操作为用户点击所述控件的操作。
11.根据权利要求8所述的电子设备,其特征在于,当所述一个或者多个程序被所述处理器执行时,使得所述电子设备执行以下步骤:
响应于所述第一操作,开始进行拍摄;
在所述第一界面上检测到用户用于指示停止拍摄的第四操作;
响应于所述第四操作,获得所述多帧图像。
12.根据权利要求8所述的电子设备,其特征在于,当所述一个或者多个程序被所述处理器执行时,使得所述电子设备执行以下步骤:
在所述电子设备的桌面上检测到所述用户用于指示打开相机应用的第五操作。
13.根据权利要求8所述的电子设备,其特征在于,所述第一对象为预设的目标对象。
14.根据权利要求13所述的电子设备,其特征在于,所述第一对象包括人或者动物。
15.一种计算机存储介质,其特征在于,包括计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行如权利要求1-7中任一项所述的拍摄长曝光图像的方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2018/119634 WO2020113534A1 (zh) | 2018-12-06 | 2018-12-06 | 一种拍摄长曝光图像的方法和电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113170037A CN113170037A (zh) | 2021-07-23 |
CN113170037B true CN113170037B (zh) | 2023-08-22 |
Family
ID=70974490
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201880099886.6A Active CN113170037B (zh) | 2018-12-06 | 2018-12-06 | 一种拍摄长曝光图像的方法和电子设备 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20210409588A1 (zh) |
EP (1) | EP3873084B1 (zh) |
JP (1) | JP2022512125A (zh) |
CN (1) | CN113170037B (zh) |
WO (1) | WO2020113534A1 (zh) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112153291B (zh) * | 2020-09-27 | 2022-09-06 | 维沃移动通信有限公司 | 拍照方法和电子设备 |
CN112215877B (zh) * | 2020-10-29 | 2024-07-02 | Oppo广东移动通信有限公司 | 图像处理方法和装置、电子设备、可读存储介质 |
CN112887623B (zh) * | 2021-01-28 | 2022-11-29 | 维沃移动通信有限公司 | 图像生成方法、装置及电子设备 |
CN114219744B (zh) * | 2021-11-25 | 2023-01-06 | 北京百度网讯科技有限公司 | 图像生成方法、装置、设备及存储介质 |
CN115525188A (zh) * | 2022-02-28 | 2022-12-27 | 荣耀终端有限公司 | 拍摄方法和电子设备 |
CN116700477B (zh) * | 2022-05-20 | 2024-08-09 | 荣耀终端有限公司 | 一种显示方法和电子设备 |
US20240259698A1 (en) * | 2023-02-01 | 2024-08-01 | Qualcomm Incorporated | Post automatic exposure control (aec) and automatic white balance (awb) processing to improve video quality |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101431616A (zh) * | 2007-11-06 | 2009-05-13 | 奥林巴斯映像株式会社 | 图像合成装置及图像合成方法 |
CN101656836A (zh) * | 2008-08-22 | 2010-02-24 | 奥林巴斯映像株式会社 | 照相机、图像合成方法以及程序 |
CN102222342A (zh) * | 2010-04-16 | 2011-10-19 | 上海摩比源软件技术有限公司 | 人体运动跟踪及其识别方法 |
CN102446352A (zh) * | 2011-09-13 | 2012-05-09 | 深圳市万兴软件有限公司 | 视频图像处理方法及装置 |
CN102903119A (zh) * | 2012-05-22 | 2013-01-30 | 北京国铁华晨通信信息技术有限公司 | 一种目标跟踪方法和装置 |
CN103888683A (zh) * | 2014-03-24 | 2014-06-25 | 深圳市中兴移动通信有限公司 | 移动终端及其拍摄方法 |
CN104079860A (zh) * | 2013-03-26 | 2014-10-01 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
CN104202521A (zh) * | 2014-08-28 | 2014-12-10 | 深圳市中兴移动通信有限公司 | 拍摄方法及拍摄装置 |
CN104427224A (zh) * | 2013-08-21 | 2015-03-18 | 佳能株式会社 | 摄像装置及其控制方法 |
CN106791380A (zh) * | 2016-12-06 | 2017-05-31 | 周民 | 一种动感照片的拍摄方法和装置 |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070177048A1 (en) * | 2006-01-31 | 2007-08-02 | Phil Van Dyke | Long exposure images using electronic or rolling shutter |
JP2009010472A (ja) * | 2007-06-26 | 2009-01-15 | Casio Comput Co Ltd | 撮像装置及びそのプログラム |
US8644644B2 (en) * | 2009-09-14 | 2014-02-04 | Adobe Systems Incorporation | Methods and apparatus for blending images |
JP2011199750A (ja) * | 2010-03-23 | 2011-10-06 | Olympus Corp | 撮像端末、外部端末、撮像システム、及び撮像方法 |
JP6019612B2 (ja) * | 2012-02-24 | 2016-11-02 | 株式会社ニコン | 映像編集装置、テレビジョン受像機、および映像編集プログラム |
JP2016009991A (ja) * | 2014-06-24 | 2016-01-18 | 株式会社ニコン | 画像処理装置、カメラおよび画像処理プログラム |
CN104113701B (zh) * | 2014-07-25 | 2017-08-11 | 努比亚技术有限公司 | 拍摄方法及装置 |
JP6497030B2 (ja) * | 2014-10-29 | 2019-04-10 | 株式会社リコー | 撮影システム、情報処理装置、撮影方法、プログラム、記憶媒体 |
JP6397754B2 (ja) * | 2014-12-25 | 2018-09-26 | 京セラ株式会社 | 携帯端末、制御プログラムおよび制御方法 |
US10192129B2 (en) * | 2015-11-18 | 2019-01-29 | Adobe Systems Incorporated | Utilizing interactive deep learning to select objects in digital visual media |
CN105430263A (zh) * | 2015-11-24 | 2016-03-23 | 努比亚技术有限公司 | 长曝光全景图像拍摄装置和方法 |
JP6700831B2 (ja) * | 2016-02-12 | 2020-05-27 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法、及びプログラム |
KR20170112492A (ko) * | 2016-03-31 | 2017-10-12 | 엘지전자 주식회사 | 이동 단말기 및 그 제어방법 |
CN106603931A (zh) * | 2017-02-27 | 2017-04-26 | 努比亚技术有限公司 | 一种双目拍摄方法及装置 |
EP3610453B1 (en) * | 2017-05-16 | 2023-05-10 | Apple Inc. | Synthetic long exposure image with optional enhancement using a guide image |
US10535122B2 (en) * | 2017-07-26 | 2020-01-14 | Microsoft Technology Licensing, Llc | Composite image for flash artifact removal |
CN107395997A (zh) * | 2017-08-18 | 2017-11-24 | 维沃移动通信有限公司 | 一种拍摄方法及移动终端 |
KR102117050B1 (ko) * | 2017-09-08 | 2020-05-29 | 삼성전자주식회사 | 이미지 내 휴먼 분리를 위한 전자 장치 및 방법 |
-
2018
- 2018-12-06 JP JP2021531965A patent/JP2022512125A/ja active Pending
- 2018-12-06 US US17/297,201 patent/US20210409588A1/en active Pending
- 2018-12-06 WO PCT/CN2018/119634 patent/WO2020113534A1/zh unknown
- 2018-12-06 CN CN201880099886.6A patent/CN113170037B/zh active Active
- 2018-12-06 EP EP18942323.9A patent/EP3873084B1/en active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101431616A (zh) * | 2007-11-06 | 2009-05-13 | 奥林巴斯映像株式会社 | 图像合成装置及图像合成方法 |
CN101656836A (zh) * | 2008-08-22 | 2010-02-24 | 奥林巴斯映像株式会社 | 照相机、图像合成方法以及程序 |
CN102222342A (zh) * | 2010-04-16 | 2011-10-19 | 上海摩比源软件技术有限公司 | 人体运动跟踪及其识别方法 |
CN102446352A (zh) * | 2011-09-13 | 2012-05-09 | 深圳市万兴软件有限公司 | 视频图像处理方法及装置 |
CN102903119A (zh) * | 2012-05-22 | 2013-01-30 | 北京国铁华晨通信信息技术有限公司 | 一种目标跟踪方法和装置 |
CN104079860A (zh) * | 2013-03-26 | 2014-10-01 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
CN104427224A (zh) * | 2013-08-21 | 2015-03-18 | 佳能株式会社 | 摄像装置及其控制方法 |
CN108933898A (zh) * | 2013-08-21 | 2018-12-04 | 佳能株式会社 | 摄像装置及其控制方法 |
CN103888683A (zh) * | 2014-03-24 | 2014-06-25 | 深圳市中兴移动通信有限公司 | 移动终端及其拍摄方法 |
CN104202521A (zh) * | 2014-08-28 | 2014-12-10 | 深圳市中兴移动通信有限公司 | 拍摄方法及拍摄装置 |
CN106791380A (zh) * | 2016-12-06 | 2017-05-31 | 周民 | 一种动感照片的拍摄方法和装置 |
Also Published As
Publication number | Publication date |
---|---|
WO2020113534A1 (zh) | 2020-06-11 |
EP3873084A1 (en) | 2021-09-01 |
EP3873084B1 (en) | 2023-10-04 |
EP3873084A4 (en) | 2021-11-03 |
US20210409588A1 (en) | 2021-12-30 |
JP2022512125A (ja) | 2022-02-02 |
CN113170037A (zh) | 2021-07-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112532869B (zh) | 一种拍摄场景下的图像显示方法及电子设备 | |
WO2021052232A1 (zh) | 一种延时摄影的拍摄方法及设备 | |
WO2020168956A1 (zh) | 一种拍摄月亮的方法和电子设备 | |
CN113170037B (zh) | 一种拍摄长曝光图像的方法和电子设备 | |
WO2020029306A1 (zh) | 一种图像拍摄方法及电子设备 | |
CN112712470B (zh) | 一种图像增强方法及装置 | |
CN112887583A (zh) | 一种拍摄方法及电子设备 | |
CN114140365B (zh) | 基于事件帧的特征点匹配方法及电子设备 | |
CN113949803B (zh) | 拍照方法及电子设备 | |
CN114866860B (zh) | 一种播放视频的方法及电子设备 | |
CN112150499B (zh) | 图像处理方法及相关装置 | |
CN112700377A (zh) | 图像泛光处理方法及装置、存储介质 | |
CN113542580A (zh) | 去除眼镜光斑的方法、装置及电子设备 | |
CN110286975B (zh) | 一种前景元素的显示方法和电子设备 | |
CN116051351B (zh) | 一种特效处理方法和电子设备 | |
WO2022033344A1 (zh) | 视频防抖方法、终端设备和计算机可读存储介质 | |
CN116709018B (zh) | 一种变焦条分割方法及电子设备 | |
CN116017138B (zh) | 测光控件显示方法、计算机设备和存储介质 | |
CN118474522A (zh) | 拍照方法、终端设备、芯片及存储介质 | |
CN116627560A (zh) | 一种生成主题壁纸的方法及电子设备 | |
CN115268742A (zh) | 一种生成封面的方法及电子设备 | |
CN118113187A (zh) | 悬浮窗显示的方法和电子设备 | |
CN115623323A (zh) | 一种拍摄方法及电子设备 | |
CN118860621A (zh) | 动画渲染方法、终端设备和计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |