CN112825543B - 一种拍摄的方法及设备 - Google Patents

一种拍摄的方法及设备 Download PDF

Info

Publication number
CN112825543B
CN112825543B CN201911139858.5A CN201911139858A CN112825543B CN 112825543 B CN112825543 B CN 112825543B CN 201911139858 A CN201911139858 A CN 201911139858A CN 112825543 B CN112825543 B CN 112825543B
Authority
CN
China
Prior art keywords
user
original image
electronic device
user operation
receiving
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911139858.5A
Other languages
English (en)
Other versions
CN112825543A (zh
Inventor
漆思远
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201911139858.5A priority Critical patent/CN112825543B/zh
Publication of CN112825543A publication Critical patent/CN112825543A/zh
Application granted granted Critical
Publication of CN112825543B publication Critical patent/CN112825543B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof

Abstract

本申请实施例提供了一种拍摄的方法及电子设备,所述方法应用于电子设备,包括:接收数字变焦指令,响应所述数字变焦指令对原始图像进行放大;接收第一用户操作,响应第一用户操作从放大后的所述原始图像中确定用户关心区域;根据所述用户关心区域对放大前的所述原始图像进行裁剪,使用裁剪后的所述原始图像填充所述电子设备的交互界面。根据本申请提供了技术方案,电子设备在进行拍摄时,进行数字变焦,尤其是高倍率数字变焦下,根据用户确定的用户关心区域裁剪原始图像,使电子设备的晃动对最终的成像影响较小,提升了用户体验。

Description

一种拍摄的方法及设备
技术领域
本申请涉及电子技术领域,尤其涉及一种拍摄的方法及设备。
背景技术
用户在使用电子设备(例如手机)进行拍摄时,手的抖动是拍摄中无法准确抓取物体的主要因素。随着变焦倍率的增加,拍摄内容在图像传感器上所占像素也随着倍率呈相应倍数的减少,那么相同程度抖动造成的像素数量的偏移对成像的影响也越大。因此抖动对拍摄的影响会随着变焦倍率的提高而相应地增加,用户也就需要付出更多的努力去稳定拍摄装置,导致高倍率下拍摄的成本和难度急剧增加。
发明内容
本申请提供一种拍摄的方法及电子设备,电子设备在进行拍摄进行数字变焦时,,尤其是高倍率数字变焦下,根据用户确定的用户关心区域裁剪原始图像,使电子设备的晃动对最终的成像影响较小,提升了用户体验。
第一方面,提供了一种拍摄的方法,所述方法包括:接收数字变焦指令,响应所述数字变焦指令对原始图像进行放大;接收第一用户操作,响应第一用户操作从放大后的所述原始图像中确定用户关心区域;根据所述用户关心区域对放大前的所述原始图像进行裁剪,使用裁剪后的所述原始图像填充所述电子设备的交互界面。
根据本申请实施例,通过响应第一用户操作,确定用户关心区域,在通过针对用户关心区域进行电子防抖,可以实现在用户执行拍摄操作时,对原始图像进行裁剪,并不影响获取图像的面积,也就是不需要增加外部装置就能实现更好的防抖效果,从而提升用户体验。
结合第一方面,在第一方面的某些实现方式中,所述方法还包括:接收第二用户操作,响应所述第二用户操作保存所述交互界面呈现的图像。
根据本申请实施例,用户可以在任何时候执行拍摄操作。
结合第一方面,在第一方面的某些实现方式中,所述方法还包括:呈现第一标识,所述第一标识用于指示用户关心区域在所述原始图像中的位置。
根据本申请实施例,用户可以在交互界面上获知之前确定的用户关心区域在当前获取的原始图像中的位置。
结合第一方面,在第一方面的某些实现方式中,在所述接收第一用户操作,响应第一用户操作从放大后的所述原始图像中确定用户关心区域后,所述方法还包括:呈现第二标识,所述第二标识用于指示用户调整所述电子设备的角度或位置。
根据本申请实施例,当电子设备发生抖动时,可以通过在交互界面显示与抖动方向相反的转动或移动提醒用户减弱晃动,从而减轻电子设备的抖动。
结合第一方面,在第一方面的某些实现方式中,所述接收第一用户操作包括:当所述数字变焦指令中包括的数字变焦倍率大于第一阈值时,接收所述第一用户操作。
根据本申请实施例,在低倍率数字变焦时,用户并不容易抖动,当用户进行高倍率放大时,开始电子防抖。
结合第一方面,在第一方面的某些实现方式中,所述原始图像为经过光学变焦获取的图像。
第二方面,提供了一种电子设备,包括:一个或多个处理器;一个或多个存储器;多个应用程序;以及一个或多个程序,其中所述一个或多个程序被存储在所述存储器中,当所述一个或者多个程序被所述处理器执行时,使得所述电子设备执行以下步骤:接收数字变焦指令,响应所述数字变焦指令对原始图像进行放大;接收第一用户操作,响应第一用户操作从放大后的所述原始图像中确定用户关心区域;根据所述用户关心区域对放大前的所述原始图像进行裁剪,使用裁剪后的所述原始图像填充所述电子设备的交互界面。
结合第二方面,在第二方面的某些实现方式中,当所述一个或者多个程序被所述处理器执行时,使得所述电子设备执行以下步骤:接收第二用户操作,响应所述第二用户操作保存所述交互界面呈现的图像。
结合第二方面,在第二方面的某些实现方式中,当所述一个或者多个程序被所述处理器执行时,使得所述电子设备执行以下步骤:呈现第一标识,所述第一标识用于指示用户关心区域在所述原始图像中的位置。
结合第二方面,在第二方面的某些实现方式中,在所述接收第一用户操作,响应第一用户操作从放大后的所述原始图像中确定用户关心区域后,当所述一个或者多个程序被所述处理器执行时,使得所述电子设备执行以下步骤:呈现第二标识,所述第二标识用于指示用户调整所述电子设备的角度或位置。
结合第二方面,在第二方面的某些实现方式中,所述接收第一用户操作包括:当所述数字变焦指令中包括的数字变焦倍率大于第一阈值时,接收所述第一用户操作。
结合第二方面,在第二方面的某些实现方式中,所述原始图像为经过光学变焦获取的图像。
第三方面,提供了一种计算机存储介质,包括计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行如上述第一方面中所述任意一种的拍摄的方法。
附图说明
图1是本申请实施适用的电子设备的示意图。
图2是拍摄物体成像在传感器上的示意图。
图3是ISP在数字变焦下的拍照和预览处理流程示意图。
图4是一种电子防抖的流程示意图。
图5是本申请实施例提供的一种拍摄的方法的示意图。
图6是本申请实施例提供的一种拍摄方法的流程示意图。
图7是本申请实施例提供的一种拍摄方法的软硬件整体框架示意图。
图8是本申请实施例提供的另一种拍摄方法的软硬件整体框架示意图。
图9是本申请实施提供的一种电子设备的结构示意图。
具体实施方式
下面将结合附图,对本申请中的技术方案进行描述。
本申请实施例中的可以进行摄像或拍摄的电子设备可以是手机、平板电脑、笔记本电脑、智能手环、智能手表、智能头盔、智能眼镜等电子设备。电子设备还可以是具有无线通信功能的手持设备、车载设备或者相机等,应理解,这些电子设备都具有数字变焦的功能,本申请实施例对此并不限定。
图1是本申请实施适用的电子设备的示意图,在此,以电子设备为手机进行说明。
如图1所示,电子设备可以包括壳体,显示屏和至少一个摄像模组,摄像模组可以位于电子设备的不同位置,例如,壳体或者显示屏等,本申请在此并不做限制,显示屏安装在壳体上。电子设备还包括设置于壳体内部的电子元件(图中未示出),电子元件包括处理器、闪光灯、麦克风、电池等,但不限于此。
如图1所示,电子设备可以包括多个摄像模组,摄像模组可以位于电子设备的不同位置,本申请在此并不做限制。
当前,电子设备大都具备拍摄装置,并且大部分支持数字变焦功能。所谓数字变焦,就是不从物理上改变拍摄装置的实际焦距,而是将传感器接受到的内容通过算法处理,达到放大的目的。这种放大的过程都是内置芯片上的图像信号处理器(image signalprocessing,ISP)来完成的,一般是根据用户选择的变焦倍率,将图片中心区域的部分,裁剪一部分下来并将这部分放大到用户选定的拍照出图的大小。
图2是拍摄物体成像在传感器上的示意图,当拍摄物体离镜头较远时,其在传感器上的成像区域面积较小,并且面积与距离成反比。
图3是ISP在数字变焦下的拍照和预览处理流程示意图。
如图3所示,传感器感光成像后,经过一定的预处理到裁剪模块(crop module),裁剪模块根据用户设置的变焦倍率,计算出裁剪区域的大小,然后以图像中心作为裁剪区域的中心进行裁剪。例如,假设传感器输出的图像宽和高分别是w和h,并且用户设置的变焦倍率是2,那么裁剪模块会将中心宽和高分别是w/2和h/2的区域裁剪下来。裁剪的图像一路送给预览通路,先后经过后处理模块(post-process module),放大模块(upscale module)后倍放大到屏幕大小后给显示模块,呈现给用户预览。另一路则送给拍摄算法模块(capturealgo module),当用户按下拍照键后,拍摄算法模块会对这路数据进行更复杂的计算处理,处理的结果通过编码模块(encoder module)后,得到照片输出。根据用户设置的输出分辨率不同,拍照得到的输出分辨率可能与预览分辨率(屏幕分辨率)不同。
但是ISP的这种处理流程会使得抖动严重影响高倍率的数字变焦情况下的成像质量和拍摄难度。由于拍摄装置发生抖动,使得成像平面发生小角度旋转,从而导致裁剪区域向旁边移动,拍摄内容的成像区域偏出裁剪的区域。
电子防抖(electric image stabilization,EIS)是目前另一种手机拍摄装置上主要的内置防抖技术,主要用早视频的录制或者视频预览的场景。EIS一般接受惯性单元(inertial measurement unit,IMU)的测量结果作为输入,通过对这些输入的分析以及拍摄装置的内置参数,估计拍摄装置的运动情况以及其对成像的影响,最后对每一帧做出不规则的裁剪和变形,使得最后的视频帧的内容稳定、或者运动平滑。
如图4所示,当拍摄装置在拍摄物体产生晃动时;拍摄装置内的传感器接收到的画面中,物体就会产生相应的晃动,EIS会根据惯性传感器的输出估计拍摄装置的运动,然后对视频帧进行裁剪,最后得到的连续帧中被拍摄物体就保持稳定。
应理解,在这种情况下,EIS实际上是作用于裁剪之后的图像的。在变焦的过程中,裁剪模块会根据变焦的倍率对传感器获取的图像进行裁剪。在EIS处理前,放大模块会将裁剪后的区域进行一定程度的放大,作为EIS处理的余量,一般为10%左右。最后EIS根据运动情况对方法后的视频帧进行变形和裁剪。
EIS需要对裁剪之后的图像进一步进行裁剪,会损失原有的视场角。例如,拍摄装置的镜头的视场角为80°,在数字变焦的情况下选择5倍变焦后,其视场角应该是16°。但是如果设置每个方向10%的防抖余量,那么最后用户获得的视场角只剩12.8°。其次,EIS在裁剪之后的图像上进行处理,其防抖余量e与变焦倍率x的关系是:
Figure BDA0002280614020000041
其中v是镜头视场角。也就是说这种流程下,EIS能够用来处理的防抖余量随着变焦倍率的增加而减小,在数字变焦的高倍率下EIS的实际防抖能力很差。
本申请提供了一种拍摄的方法,针对的是电子设备在数字变焦下,尤其是高倍率数字变焦下,电子设备抖动导致用户难以对准拍摄物体,导致拍摄难度大,成片概率低的问题。
图5是本申请实施例提供的一种拍摄的方法的示意图。
如图5所示,可以按照下述的步骤执行拍摄的方法:
S101,接收数字变焦指令,响应所述数字变焦指令对原始图像进行放大。
可选地,原始图像可以是电子设备的传感器获取的图像,即原始图像可以根据光学变焦获取的图像,或者是经过ISP中预处理模块处理过的图像。
S102,接收第一用户操作,响应第一用户操作从放大后的所述原始图像中确定用户关心区域(region of interest,ROI)。
应理解,第一用户操作可以是预设操作,例如,用户点击屏幕进行自动曝光(automatic exposure,AE)/自动对焦(automatic focus,AF)时,也同时用于确定ROI;或者,可以设定连续点击电子设备的屏幕两下为确定ROI的预设操作;或者可以用语音确定ROI,本申请对第一用户操作并不做具体限制。
可选地,在用户确定ROI后,交互界面可以呈现第一标识,第一标识可以用于指示ROI在所述原始图像中的位置。例如,第一标识可以是一个透明的矩形框,用于表示原始图像,矩形框中可以包括圆点,用于指示当前交互界面上显示的图像在原始图像中的位置,并且随着电子设备的转动或平移,圆点的位置也会随着改变。
可选地,当所述数字变焦指令中包括的数字变焦倍率大于第一阈值时,接收所述第一用户操作。例如,当数字变焦的倍率大于7时,开始接收第一用户操作。在数字变焦倍率较低时,用户不需要很大努力也能够稳定拍摄过程。
可选地,在用户确定ROI后,当电子设备产生抖动时,交互界面还可以呈现第二标识,第二标识用于指示用户调整所述电子设备的角度或位置,使拍摄出的图像的质量更好。
S103,根据所述用户关心区域对放大前的所述原始图像进行裁剪,使用裁剪后的所述原始图像填充所述电子设备的交互界面。
可选地,可以接收第二用户操作,响应所述第二用户操作保存所述交互界面呈现的图像,即用户在任何时候都可以进行拍摄。第二用户操作可以是预设操作,例如,可以设定连续点击电子设备的屏幕两下为保存交互界面呈现的图像的预设操作;或者可以用语音保存交互界面呈现的图像;或者点击交互屏幕上的拍摄键,本申请对第二用户操作并不做具体限制。
本申请实施例,增加了交互界面参与ISP处理流程的通路,使得用户能够通过交互界面参与整个图像处理流程,目的是使得用户能通过一定的方式将自己想要拍摄的物体的信息引入到ISP中,使得ISP具备处理ROI的数据基础。并且,ISP的裁剪模块可以处理外部用户输入的指定区域的裁剪。由于已经确定了ROI,可以从原始图像中裁剪用户需要的区域的图像,并且数字变焦的倍率较大,电子设备的晃动对最终的成像影响较小,提升了用户体验。
图6是本申请实施例提供的一种拍摄方法的流程示意图。
S201,用户开启电子设备的拍摄应用进入拍摄的交互界面,初始状态下,电子设备的摄像模组处于没有变焦的状态,五角星表示远处用户想要拍摄的物体,在预览界面中呈现的大小较小。
S202,用户通过调整变焦倍率,将拍摄物体在预览界面上不断放大。在变焦倍率较小的情况下,用户不需要进行太多的努力,也基本能够将拍摄物体稳定在预览界面中央。
S203,当电子设备的光学变焦达到最大时,继续放大图像,则进入数字变焦,例如,电子设备的模组可以实现5x的光学变焦,在用户需要对拍摄物体进一步放大时,则开始通过ISP进行数字变焦。
可选地,在数字变焦倍率较低时,用户不需要很大努力也能够稳定拍照过程,因此,在数字变焦倍率较低时,电子防抖的流程不开启,EIS算法不发生作用,裁剪模块只根据倍率对中心区域进行裁剪。当数字变焦倍率超过第一阈值时,用户界面(user interface,UI)通道开启,EIS以及ISP的整个防抖流程开启。
可选地,用户在拍摄过程中会点击需要拍摄的物体,使得相机进行AE/AF的调整,可以将用户点击交互屏幕调整AE/AF的操作同时作为ROI的位置信息,通过UI传给ISP。
S204,用户确定ROI后,EIS算法模块接收到ROI信息,同时整个ISP的防抖流程开启。
可选地,拍摄的交互界面可以出现第一标识210,用于实时展示用户确定的ROI当前处于传感器接收原始图像的位置,用户可以根据第一标识210来调整电子设备的角度或位置。
可选地,第一标识210可以是一个透明的框也可以是传感器获取的原始图像,或者是其他的标识信息。
S205,如果用户手持发生抖动,如图中所示向右发生抖动,EIS算法根据IMU得到的信息对原始图像进行裁剪,使得交互界面上显示的图像保持稳定。同时也将交互界面上显示的图像在传感器获取的原始图像中的位置显示在第一标识210中。
S206,如果第一标识210显示拍摄物体成像离传感器获取的原始图像的边缘较远,用户实际不需要进行调整。
可选地,当用户晃动幅度过大,导致拍摄的ROI接近传感器获取的原始图像的边缘时,交互界面还可以显示第二标识,第二标识用于提示用户向晃动的相反方向转动或移动电子设备,使得ROI的成像位置向中心位置靠拢。
应理解,由于高倍率变焦下,防抖范围远超成像大小,因此,用户实际并不需要频繁调整手机姿态。
S207,用户根据实际需要在触发拍照防抖后,仍然可以继续调整数字变焦倍率。
可选地,用户也可以重新点击交互界面,调整ROI的位置。这样用户可以逐步地调整和选择点击区域,使得最后拍摄的范围更加准确。
S208,用户可以在任何步骤进行拍摄,保存交互界面显示的图像。例如,可以点击电子设备的拍照键或者语音控制拍摄。
应理解,由于采用传感器获取的原始图像进行处理,ISP的处理流程能够保证拍摄得到的内容与实际预览显示内容的一致性,不会由于电子防抖的处理而缩减交互界面上显示的图像的尺寸。
图7是本申请实施例提供的一种拍摄方法的软硬件整体框架示意图。
传感器感光形成原始图像后,传统的处理方式为经过预处理模块到裁剪模块进行处理,本申请在预处理模块和裁剪模块之间设置了EIS算法模块,用户在数字变焦时,开启电子防抖,EIS算法模块可以接收用户确定的ROI的信息。
EIS算法模块还可以接收预处理过的原始图像,并根据用户确定的ROI的信息和和经过预处理的原始图像通过交互界面显示出第一标识,即显示ROI在原始图像中的位置。
同时,EIS算法模块还可以接收IMU获取的电子设备的抖动信息,并根据抖动信息可以在交互界面上显示第二标识,用于指示用户将电子设备向抖动相反的方向转动或移动。
ESI算法模块还可以根据ROI的信息向预处理模块中的AE/AF单元传输将要裁剪的区域和位置的信息,用于调整拍摄的光圈及曝光参数,还可以向裁剪模块传输将要裁剪的区域和位置的信息。裁剪模块通过ESI传输的用户确定的区域和位置的信息对预处理后的原始图像进行裁剪处理,而后在通过后处理模块,放大模块,最后通过显示模块将裁剪后的原始图像显示在交互界面上,当用户进行第二用户操作时,裁剪模块根据区域和位置的信息对预处理后的原始图像进行裁剪,而后通过拍摄算法模块和编码模块对处理后的图像进行编码存储。
应理解,与传统的电子防抖相比,本申请的技术方案在ISP的处理流程改进有以下几点:
1、增加了用户通过交互界面参与ISP处理流程的通路,使得用户能够通过交互界面确定裁剪的区域从而参与整个图像处理流程,目的是使得用户能通过一定的方式将自己想要拍摄的物体的信息引入到ISP中,使得ISP具备处理ROI的数据基础。
2、ISP的裁剪模块需要能够处理外部输入的指定区域的裁剪。
3、在拍照流程中引入EIS算法模块,处理生效的位置如图7所示在裁剪模块之前。
其中,EIS算法模块接收三个输入:
1、用户交互输入的物体在画面中的位置信息(x,y)。
2、IMU的输入,可以包括但不限于陀螺仪(gyroscope)和加速度计(accelerometer)。
3、经过与处理的每一帧的图像数据或者一定倍率降采样的图像数据。
EIS算法模块给出裁剪的位置以及范围地信息,并传输给两个模块:1、将裁剪的区域和位置信息给裁剪模块。2、将裁剪的区域和位置信息给预处理模块中控制曝光的AE模块以及控制对焦的AF单元。
本申请的整体框架的技术效果在于以下几个方面:
(1)EIS算法模块直接作用于裁剪模块,其输入是未经裁剪的全视场角的图像,因此其防抖余量是电子设备的镜头的全视场角减去输出的视场角,其防抖范围e与变焦倍率x的关系可以用以下公式表示,其中e表示镜头全视场角大小:
Figure BDA0002280614020000071
可以看出防抖范围e会随着变焦倍率的增加而增大,而不是像视频场景下随着倍率增加而减小。防抖范围相对于输出视场角的倍率r与变焦倍率x的关系为:
Figure BDA0002280614020000072
比如变焦倍率为10时,r的值为9,也就是说防抖范围是实际输出大小的9倍。因此,防抖范围能够确保一个好的防抖效果,在大范围抖动情况下能够保证输出画面稳定。
本申请的技术方案中,防抖余量用的是放大过程中本身就要裁剪的部分,而不需要在裁剪之后的图像上做进一步的裁剪,因此本申请的防抖过程不会损失额外的视场角(field of view,FOV)。
(2)EIS算法模块的传输给AE和AF单元,使得这两个单元能够针对ROI进行曝光和对焦的调整。在EIS算法模块能够稳定裁剪用户ROI的情况下,AE和AF的输入区域理论上保持不变,因此其曝光和对焦都会保持稳定。
(3)增加的用户输入路径使得用户能够选择需要稳定或者拍摄的物体,而不是像视频EIS算法中完全由算法决定裁剪的区域。
图8是本申请实施例提供的另一种拍摄方法的软硬件整体框架示意图。
传感器感光形成原始图像后,传统的处理方式为经过预处理模块到裁剪模块进行处理,本申请在预处理模块和变形(warp)模块之间设置了EIS算法模块,用户在数字变焦时,开启电子防抖,EIS算法模块可以接收用户确定的ROI的信息。
EIS算法模块还可以接收预处理过的原始图像,并根据用户确定的ROI的信息和和经过预处理的原始图像通过交互界面显示出第一标识,即显示ROI在原始图像中的位置。
同时,EIS算法模块还可以接收IMU获取的电子设备的抖动信息,并根据抖动信息可以在交互界面上显示第二标识,用于指示用户将电子设备向抖动相反的方向转动或移动。
ESI算法模块还可以根据ROI的信息向预处理模块中的AE/AF单元传输将要裁剪的区域和位置的信息,用于调整拍摄的光圈及曝光参数,还可以向变形模块变形参数,用于指示针对经过后处理模块的原始图像的变形指示,而后经过放大模块,显示模块显示在电子设备的交互界面上。
当用户进行第二用户操作时,裁剪模块根据ESI算法模块传输的区域和位置的信息对预处理后的原始图像进行裁剪,而后通过拍摄算法模块和编码模块对处理后的图像进行编码存储。
应理解,由于变形模块相较于裁剪模块可以提供更多种的裁剪及校正功能,因此,交互界面的显示图像可以更加流畅。
可以理解的是,电子设备为了实现上述功能,其包含了执行各个功能相应的硬件和/或软件模块。结合本文中所公开的实施例描述的各示例的算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。本领域技术人员可以结合实施例对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本实施例可以根据上述方法示例对电子设备进行功能模块的划分,例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块可以采用硬件的形式实现。需要说明的是,本实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
在采用对应各个功能划分各个功能模块的情况下,图9示出了上述实施例中涉及的电子设备900的一种可能的组成示意图,如图9所示,该电子设备900可以包括:显示单元901、获取单元902和处理单元903。
其中,显示单元901可以用于支持电子设备900执行上述S201等,和/或用于本文所描述的技术的其他过程。
获取单元902可以用于支持电子设备900执行上述S203等,和/或用于本文所描述的技术的其他过程。
处理单元903可以用于支持电子设备900执行上述S204等,和/或用于本文所描述的技术的其他过程。
需要说明的是,上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应功能模块的功能描述,在此不再赘述。
本实施例提供的电子设备,用于执行上述拍摄的方法,因此可以达到与上述实现方法相同的效果。
在采用集成的单元的情况下,电子设备可以包括处理模块、存储模块和通信模块。其中,处理模块可以用于对电子设备的动作进行控制管理,例如,可以用于支持电子设备执行上述显示单元901、获取单元902和处理单元903执行的步骤。存储模块可以用于支持电子设备执行存储程序代码和数据等。通信模块,可以用于支持电子设备与其他设备的通信。
其中,处理模块可以是处理器或控制器。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框,模块和电路。处理器也可以是实现计算功能的组合,例如包含一个或多个微处理器组合,数字信号处理(digital signal processing,DSP)和微处理器的组合等等。存储模块可以是存储器。通信模块具体可以为射频电路、蓝牙芯片、Wi-Fi芯片等与其他电子设备交互的设备。
本实施例还提供一种计算机存储介质,该计算机存储介质中存储有计算机指令,当该计算机指令在电子设备上运行时,使得电子设备执行上述相关方法步骤实现上述实施例中的拍摄的方法。
本实施例还提供了一种计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行上述相关步骤,以实现上述实施例中的拍摄的方法。
另外,本申请的实施例还提供一种装置,这个装置具体可以是芯片,组件或模块,该装置可包括相连的处理器和存储器;其中,存储器用于存储计算机执行指令,当装置运行时,处理器可执行存储器存储的计算机执行指令,以使芯片执行上述各方法实施例中的拍摄的方法。
其中,本实施例提供的电子设备、计算机存储介质、计算机程序产品或芯片均用于执行上文所提供的对应的方法,因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地生成按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包括一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。

Claims (9)

1.一种拍摄的方法,应用于电子设备,其特征在于,所述方法包括:
接收数字变焦指令,响应所述数字变焦指令对原始图像进行放大;
接收第一用户操作,响应第一用户操作从放大后的所述原始图像中确定用户关心区域;
呈现第一标识,所述第一标识用于指示用户关心区域在所述原始图像中的位置;
呈现第二标识,所述第二标识用于指示用户向抖动的相反方向转动或移动所述电子设备;
根据所述用户关心区域对放大前的所述原始图像进行裁剪,使用裁剪后的所述原始图像填充所述电子设备的交互界面。
2.如权利要求1所述的方法,其特征在于,所述方法还包括:
接收第二用户操作,响应所述第二用户操作保存所述交互界面呈现的图像。
3.如权利要求1所述的方法,其特征在于,所述接收第一用户操作包括:
当所述数字变焦指令中包括的数字变焦倍率大于第一阈值时,接收所述第一用户操作。
4.如权利要求1至3任一项所述的方法,其特征在于,所述原始图像为经过光学变焦获取的图像。
5.一种电子设备,其特征在于,包括:
一个或多个处理器;
一个或多个存储器;
多个应用程序;
以及一个或多个程序,其中所述一个或多个程序被存储在所述存储器中,当所述一个或者多个程序被所述处理器执行时,使得所述电子设备执行以下步骤:
接收数字变焦指令,响应所述数字变焦指令对原始图像进行放大;
接收第一用户操作,响应第一用户操作从放大后的所述原始图像中确定用户关心区域;
呈现第一标识,所述第一标识用于指示用户关心区域在所述原始图像中的位置;
呈现第二标识,所述第二标识用于指示用户向抖动的相反方向转动或移动所述电子设备;
根据所述用户关心区域对放大前的所述原始图像进行裁剪,使用裁剪后的所述原始图像填充所述电子设备的交互界面。
6.如权利要求5所述的电子设备,其特征在于,当所述一个或者多个程序被所述处理器执行时,使得所述电子设备还执行以下步骤:
接收第二用户操作,响应所述第二用户操作保存所述交互界面呈现的图像。
7.如权利要求5所述的电子设备,其特征在于,所述接收第一用户操作包括:
当所述数字变焦指令中包括的数字变焦倍率大于第一阈值时,接收所述第一用户操作。
8.如权利要求5至7任一项所述的电子设备,其特征在于,所述原始图像为经过光学变焦获取的图像。
9.一种计算机存储介质,其特征在于,包括计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行如权利要求1至4中任一项所述的拍摄的方法。
CN201911139858.5A 2019-11-20 2019-11-20 一种拍摄的方法及设备 Active CN112825543B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911139858.5A CN112825543B (zh) 2019-11-20 2019-11-20 一种拍摄的方法及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911139858.5A CN112825543B (zh) 2019-11-20 2019-11-20 一种拍摄的方法及设备

Publications (2)

Publication Number Publication Date
CN112825543A CN112825543A (zh) 2021-05-21
CN112825543B true CN112825543B (zh) 2022-10-04

Family

ID=75906722

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911139858.5A Active CN112825543B (zh) 2019-11-20 2019-11-20 一种拍摄的方法及设备

Country Status (1)

Country Link
CN (1) CN112825543B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113473028A (zh) * 2021-07-15 2021-10-01 Oppo广东移动通信有限公司 图像处理方法、装置、摄像头组件、电子设备及介质
WO2023185127A1 (zh) * 2022-03-29 2023-10-05 荣耀终端有限公司 图像处理方法与电子设备
CN116055868B (zh) * 2022-05-30 2023-10-20 荣耀终端有限公司 一种拍摄方法及相关设备
WO2024076362A1 (en) * 2022-10-04 2024-04-11 Google Llc Stabilized object tracking at high magnification ratios

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102348059A (zh) * 2010-07-27 2012-02-08 三洋电机株式会社 摄像装置
CN202261527U (zh) * 2011-08-12 2012-05-30 广东步步高电子工业有限公司 一种带触摸屏的数字摄影设备
CN107750451A (zh) * 2015-07-27 2018-03-02 三星电子株式会社 用于稳定视频的方法和电子装置
CN110213490A (zh) * 2019-06-25 2019-09-06 浙江大华技术股份有限公司 一种图像防抖方法、装置、电子设备及存储介质

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6643843B2 (ja) * 2015-09-14 2020-02-12 オリンパス株式会社 撮像操作ガイド装置および撮像装置の操作ガイド方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102348059A (zh) * 2010-07-27 2012-02-08 三洋电机株式会社 摄像装置
CN202261527U (zh) * 2011-08-12 2012-05-30 广东步步高电子工业有限公司 一种带触摸屏的数字摄影设备
CN107750451A (zh) * 2015-07-27 2018-03-02 三星电子株式会社 用于稳定视频的方法和电子装置
CN110213490A (zh) * 2019-06-25 2019-09-06 浙江大华技术股份有限公司 一种图像防抖方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN112825543A (zh) 2021-05-21

Similar Documents

Publication Publication Date Title
CN112825543B (zh) 一种拍摄的方法及设备
US9596398B2 (en) Automatic image capture
US8976270B2 (en) Imaging device and imaging device control method capable of taking pictures rapidly with an intuitive operation
US7688379B2 (en) Selecting quality images from multiple captured images
KR100925319B1 (ko) 화상흔들림의 검출기능을 구비한 촬상장치, 촬상장치의제어방법 및 촬상장치의 제어프로그램을 기록한 기록매체
US20140267869A1 (en) Display apparatus
WO2016002228A1 (ja) 撮像装置
US20140071303A1 (en) Processing apparatus, processing method, and program
CN104065868A (zh) 摄像设备及其控制方法
US20160134805A1 (en) Imaging apparatus, imaging method thereof, and computer readable recording medium
JP2009021984A (ja) 撮像装置、プログラム
US9451149B2 (en) Processing apparatus, processing method, and program
CN112637500B (zh) 图像处理方法及装置
CN112887617B (zh) 一种拍摄方法、装置和电子设备
CN114125268A (zh) 对焦方法及装置
JP2007081465A (ja) 遠隔装置及び撮像装置
CN113302908B (zh) 控制方法、手持云台、系统及计算机可读存储介质
JP6188407B2 (ja) 交換レンズ
WO2014080682A1 (ja) 撮像装置及びその合焦方法と合焦制御プログラム
JP7131541B2 (ja) 画像処理装置、画像処理方法および画像処理プログラム
CN116939357A (zh) 微距拍摄方法、电子设备和计算机可读存储介质
JP6645711B2 (ja) 画像処理装置、画像処理方法、プログラム
CN112291476A (zh) 拍摄防抖处理方法、装置和电子设备
JP5182395B2 (ja) 撮像装置、撮像方法および撮像プログラム
JP2014158162A (ja) 画像処理装置、画像処理方法およびプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant