CN112422805B - 一种拍摄方法及电子设备 - Google Patents

一种拍摄方法及电子设备 Download PDF

Info

Publication number
CN112422805B
CN112422805B CN201910780029.9A CN201910780029A CN112422805B CN 112422805 B CN112422805 B CN 112422805B CN 201910780029 A CN201910780029 A CN 201910780029A CN 112422805 B CN112422805 B CN 112422805B
Authority
CN
China
Prior art keywords
picture
proportion
cutting
shooting
electronic device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910780029.9A
Other languages
English (en)
Other versions
CN112422805A (zh
Inventor
徐荣跃
敖欢欢
李远友
朱聪超
霍介光
杜成
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201910780029.9A priority Critical patent/CN112422805B/zh
Priority to EP20855110.1A priority patent/EP4016987A4/en
Priority to US17/636,954 priority patent/US11700452B2/en
Priority to PCT/CN2020/110008 priority patent/WO2021032117A1/zh
Publication of CN112422805A publication Critical patent/CN112422805A/zh
Application granted granted Critical
Publication of CN112422805B publication Critical patent/CN112422805B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/69Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635Region indicators; Field of view indicators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • H04N23/684Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time
    • H04N23/6842Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time by controlling the scanning position, e.g. windowing

Abstract

本申请提供一种拍摄方法及电子设备,涉及终端技术领域,可在变焦场景下保证拍摄的防抖性能,提升拍摄画面的清晰度。该方法包括:通过第一摄像头获取第一拍摄画面;根据第一拍摄画面的第一变焦比例确定第一拍摄画面的第一裁剪比例,第一拍摄画面的防抖角度为第一摄像头的FOV与第一裁剪比例的乘积;按照第一裁剪比例裁剪第一拍摄画面;响应于第一变焦操作,通过第一摄像头获取第二拍摄画面;根据第二拍摄画面的第二变焦比例确定第二拍摄画面的第二裁剪比例,第二变焦比例大于第一变焦比例,第二裁剪比例大于第一裁剪比例,第二拍摄画面的防抖角度为第一摄像头的FOV与第二裁剪比例的乘积;按照第二裁剪比例裁剪第二拍摄画面。

Description

一种拍摄方法及电子设备
技术领域
本申请涉及终端技术领域,尤其涉及一种拍照方法及电子设备。
背景技术
手机中相机APP的拍摄功能(例如拍照、录影)已经广泛应用在用户的日常生活中。而在在手持条件下,用户使用相机APP拍摄得到的照片或视频会出现一定的抖动现象,影响拍摄画面的清晰度。
目前,一些手机可通过预置的防抖算法降低拍摄时因抖动造成的画面模糊问题。一般,防抖算法的防抖角度与拍摄画面的视场角(field of view,FOV)呈正相关的关系。例如,当拍摄画面的FOV为80°时,对应的防抖角度为8°;当拍摄画面的FOV为40°时,对应的防抖角度为4°。
那么,在拍摄过程中如果用户通过数字变焦的方式将拍摄画面放大N倍,则拍摄画面的FOV也随之缩小N倍,相应的,拍摄画面的防抖角度也会随之缩小N倍,这样一来,手机的防抖效果将显著降低,通过高倍变焦拍摄的拍摄画面的清晰度较差。
发明内容
本申请提供一种拍摄方法及电子设备,可在变焦场景下保证拍摄的防抖性能,提升拍摄画面的清晰度,提高用户的拍摄体验。
为达到上述目的,本申请采用如下技术方案:
第一方面,本申请提供一种拍摄方法,包括:电子设备通过第一摄像头获取第一拍摄画面;进而,电子设备可根据第一拍摄画面的第一变焦比例确定第一拍摄画面的第一裁剪比例,第一拍摄画面的防抖角度为第一摄像头的FOV与第一裁剪比例的乘积;电子设备按照第一裁剪比例裁剪第一拍摄画面,得到第一剪裁画面并输出;后续,如果检测到用户输入第一变焦操作,则电子设备可通过第一摄像头获取第二拍摄画面;同样,电子设备可根据第二拍摄画面的第二变焦比例确定第二拍摄画面的第二裁剪比例,第二变焦比例大于第一变焦比例,第二裁剪比例大于第一裁剪比例,第二拍摄画面的防抖角度为第一摄像头的FOV与第二裁剪比例的乘积;电子设备按照第二裁剪比例裁剪第二拍摄画面,得到第二剪裁画面并输出。
可以看出,电子设备获取到每一帧拍摄画面后,均可按照当前拍摄画面的变焦比例动态的设置本次拍摄画面的裁减比例,进而按照该剪裁比例对本次拍摄画面进行剪裁。当变焦比例越大时,为拍摄画面设置裁减比例越大,因此,当变焦比例越大时,电子设备裁剪拍摄画面时拍摄画面内剩余的可用于补偿画面抖动的防抖角度越大,这样,在高倍变焦的拍摄场景下电子设备依然可以校正抖动角度较大的拍摄画面,从而提高拍摄画面的防抖性能以及用户的拍摄体验。
在一种可能的实现方式中,电子设备根据第一变焦比例确定第一拍摄画面的第一裁剪比例,具体包括:电子设备根据第一变焦比例按照预设的公式计算第一裁剪比例;类似的,电子设备根据第二变焦比例确定第二拍摄画面的第二裁剪比例,具体包括:电子设备根据第二变焦比例按照预设的公式计算第二裁剪比例;
其中,上述预设的公式为:
Figure BDA0002176268860000021
其中,zoom_ratio为当前的变焦比例,init_ratio为常数。
也就是说,电子设备可结合当前的变焦比例一次性为拍摄画面确定出对应的裁剪比例(即上述crop_ratio),后续电子设备按照该裁剪比例对拍摄画面进行一次剪裁即可。这样一来,电子设备可基于整个拍摄画面进行一次剪裁,剪裁过程中可用于补偿画面抖动的防抖角度增加,使得电子设备拍摄出的拍摄画面在较大的抖动下仍可获得较为稳定的拍摄效果。
或者,可在电子设备中存储不同变焦比例与不同裁减比例之间的对应关系;此时,电子设备根据第一变焦比例确定第一拍摄画面的第一裁剪比例,具体包括:电子设备根据该对应关系,确定与第一变焦比例对应的第一裁剪比例;类似的,电子设备根据第二变焦比例确定第二拍摄画面的第二裁剪比例,具体包括:电子设备根据该对应关系,确定与第二变焦比对应的第二裁剪比例。
需要说明的是,当变焦比例越大时,为拍摄画面设置裁减比例越大。而拍摄画面的防抖角度为摄像头的FOV与裁减比例的乘积,那么,在摄像头的FOV一定的情况下,当变焦比例越大时,拍摄画面对应的防抖角度越大,电子设备的防抖能力越高。
在一种可能的实现方式中,电子设备按照第一裁剪比例裁剪第一拍摄画面,得到第一剪裁画面,具体包括:电子设备按照第一裁剪比例计算第一剪裁框的大小;电子设备在第一拍摄画面中确定第一剪裁框的位置;进而,电子设备可沿第一剪裁框的位置剪裁第一拍摄画面,得到第一剪裁画面。
示例性的,电子设备在第一拍摄画面中确定第一剪裁框的位置,具体包括:电子设备获取第一拍摄画面在x轴上的第一抖动方向和第一抖动量,并获取第一拍摄画面在y轴上的第二抖动方向和第二抖动量;为了补偿第一拍摄画面在x轴和y轴上的产生的抖动,电子设备可从第一初始位置(即第一剪裁框位于第一拍摄画面的中心)开始,沿第一抖动方向的反方向将第一剪裁框在x轴上移动第一抖动量,并沿第二抖动方向的反方向将第一剪裁框在y轴上移动第二抖动量。
类似的,电子设备按照第二裁剪比例裁剪第二拍摄画面,得到第二剪裁画面,具体包括:电子设备按照第二裁剪比例计算第二剪裁框的大小;电子设备在第二拍摄画面中确定第二剪裁框的位置;进而,电子设备可沿第二剪裁框的位置剪裁第二拍摄画面,得到第二剪裁画面。
示例性的,电子设备在第二拍摄画面中确定第二剪裁框的位置,具体包括:电子设备获取第二拍摄画面在x轴上的第一抖动方向和第一抖动量,并获取第二拍摄画面在y轴上的第二抖动方向和第二抖动量;进而,电子设备可从第二初始位置(即第二剪裁框位于第二拍摄画面的中心)开始,沿第一抖动方向的反方向将第二剪裁框在x轴上移动第一抖动量,并沿第二抖动方向的反方向将第二剪裁框在y轴上移动第二抖动量。
也就是说,电子设备可通过调整剪裁框在每帧拍摄画面中的位置补偿因抖动而产生的画面偏移,使得电子设备的防抖效果得到明显提升。
在一种可能的实现方式中,上述第一剪裁框中包括第一拍摄画面内的运动物体;上述第二剪裁框中包括第二拍摄画面内的运动物体。也就是说,电子设备可根据当前的变焦比例确定本次拍摄画面的裁减比例,并按照该裁减比例保留拍摄画面中的运动物体,使得运动物体能够平稳的出现在拍摄画面的主体位置,降低用户拍摄时的构图难度。
在一种可能的实现方式中,上述方法还包括:响应于用户输入的第二变焦操作,电子设备通过第二摄像头获取第三拍摄画面,第二摄像头的FOV与第一摄像头的FOV不同。也就是说,电子设备检测到用户输入的变焦操作后,还可以更换正在使用的摄像头。
在一种可能的实现方式中,电子设备通过第一摄像头获取第一拍摄画面,包括:电子设备可在预览场景、视频拍摄场景或照片拍摄场景中使用第一摄像头获取第一拍摄画面。也就是说,无论在拍照场景或视频场景下,无论在预览场景或录制场景下,电子设备获取到每一帧拍摄画面后,均可按照当前的变焦比例动态的设置本次拍摄画面的裁减比例。由于当变焦比例越大时拍摄画面对应的裁减比例越大,因此,当变焦比例越大时拍摄画面的防抖角度越大,这样,在高倍变焦的拍摄场景下电子设备依然可以校正抖动角度较大的拍摄画面,从而提高拍摄画面的防抖性能以及用户的拍摄体验。
第二方面,本申请提供一种电子设备,包括:触摸屏、一个或多个处理器、一个或多个摄像头、存储器以及一个或多个计算机程序;其中,处理器与触摸屏、摄像头和存储器均耦合,上述一个或多个计算机程序被存储在存储器中,当电子设备运行时,该处理器执行该存储器存储的一个或多个计算机程序,以使电子设备执行上述任一项所述的拍摄方法。
第三方面,本申请提供一种计算机存储介质,包括计算机指令,当计算机指令在电子设备上运行时,使得电子设备执行如第一方面中任一项所述的拍摄方法。
第四方面,本申请提供一种计算机程序产品,当计算机程序产品在电子设备上运行时,使得电子设备执行如第一方面中任一项所述的拍摄方法。
可以理解地,上述提供的第二方面所述的电子设备、第三方面所述的计算机存储介质,以及第四方面所述的计算机程序产品均用于执行上文所提供的对应的方法,因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
附图说明
图1为本申请实施例提供的一种电子设备的结构示意图一;
图2为本申请实施例提供的一种摄像头的工作原理示意图;
图3为现有技术中数码变焦的原理示意图;
图4为现有技术中对拍摄画面进行防抖处理的原理示意图;
图5为本申请实施例提供的一种拍摄方法的流程示意图;
图6为本申请实施例提供的一种拍摄方法的应用场景示意图一;
图7为本申请实施例提供的一种拍摄方法的应用场景示意图二;
图8为本申请实施例提供的一种拍摄方法的应用场景示意图三;
图9为本申请实施例提供的一种拍摄方法的应用场景示意图四;
图10为本申请实施例提供的一种拍摄方法的应用场景示意图五;
图11为本申请实施例提供的一种拍摄方法的应用场景示意图六;
图12为本申请实施例提供的一种拍摄方法的应用场景示意图七;
图13为本申请实施例提供的一种拍摄方法的应用场景示意图八;
图14为本申请实施例提供的一种拍摄方法的应用场景示意图九;
图15为本申请实施例提供的一种拍摄方法的应用场景示意图十;
图16为本申请实施例提供的一种拍摄方法的应用场景示意图十一;
图17为本申请实施例提供的一种电子设备的结构示意图二。
具体实施方式
下面将结合附图对本实施例的实施方式进行详细描述。
示例性的,本申请实施例提供的一种拍摄方法可应用于手机、平板电脑、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、手持计算机、上网本、个人数字助理(personal digital assistant,PDA)、可穿戴电子设备、虚拟现实设备等电子设备,本申请实施例对此不做任何限制。
示例性的,图1示出了电子设备100的结构示意图。
电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。
可以理解的是,本发明实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过USB接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141可接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,显示屏194,摄像头193,和无线通信模块160等供电。
电源管理模块141可用于监测电池容量,电池循环次数,电池充电电压,电池放电电压,电池健康状态(例如漏电,阻抗)等性能参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括一个或多个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(Bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成一个或多个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(codedivision multiple access,CDMA),宽带码分多址(wideband code division multipleaccess,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidounavigation satellite system,BDS),准天顶卫星系统(quasi-zenith satellitesystem,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
电子设备100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,电子设备100可以包括1个或N个显示屏194,N为大于1的正整数。
电子设备100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头193中。
摄像头193用于捕获静态图像或视频。在一些实施例中,手机100可以包括1个或N个摄像头,N为大于1的正整数。摄像头193可以是前置摄像头也可以是后置摄像头。如图2所示,摄像头193一般包括镜头(lens)和感光元件(sensor),该感光元件可以为CCD(charge-coupled device,电荷耦合元件)或者CMOS(complementary metal oxide semiconductor,互补金属氧化物半导体)等任意感光器件。
仍如图2所示,在拍摄照片或视频的过程中,被拍摄物体的反射光线经过镜头后可生成光学图像,该光学图像投射到感光元件上,感光元件将接收到的光信号转换为电信号,进而,摄像头193将得到的电信号发送至DSP(Digital Signal Processing,数字信号处理)模块进行数字信号处理,最终得到每一帧数字图像。
其中,使用摄像头193拍摄得到的图像或视频可通过显示屏194在手机100上输出,也可以将该数字图像存储在内部存储器121中,本申请实施例对此不做任何限制。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储一个或多个计算机程序,该一个或多个计算机程序包括指令。处理器110可以通过运行存储在内部存储器121的上述指令,从而使得电子设备100执行本申请一些实施例中所提供的联系人智能推荐的方法,以及各种功能应用和数据处理等。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统;该存储程序区还可以存储一个或多个应用程序(比如图库、联系人等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如照片,联系人等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如一个或多个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。在另一些实施例中,处理器110通过运行存储在内部存储器121的指令,和/或存储在设置于处理器中的存储器的指令,来使得电子设备100执行本申请实施例中所提供的智能推荐号码的方法,以及各种功能应用和数据处理。
电子设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。
扬声器170A,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170A收听音乐,或收听免提通话。
受话器170B,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时,可以通过将受话器170B靠近人耳接听语音。
麦克风170C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风170C发声,将声音信号输入到麦克风170C。电子设备100可以设置一个或多个麦克风170C。在另一些实施例中,电子设备100可以设置两个麦克风170C,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备100还可以设置三个,四个或更多麦克风170C,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
耳机接口170D用于连接有线耳机。耳机接口170D可以是USB接口130,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of the USA,CTIA)标准接口。
传感器模块180可以包括压力传感器,陀螺仪传感器,气压传感器,磁传感器,加速度传感器,距离传感器,接近光传感器,指纹传感器,温度传感器,触摸传感器,环境光传感器,骨传导传感器等,本申请实施例对此不做任何限制。
当然,本申请实施例提供的电子设备100还可以包括按键190、马达191、指示器192以及SIM卡接口195等一项或多项器件,本申请实施例对此不做任何限制。
为了清楚地理解相关现有技术以及本申请中的各实施例,首先给出相关技术的简要介绍:
视场角(field of view,FOV)又可称为视场,视场角的大小决定了光学仪器(例如摄像头)拍摄出的拍摄画面的视野范围。当摄像头的FOV越大时,拍摄画面的视野范围越大;当摄像头的FOV越小时,拍摄画面的视野范围越小。
数码变焦(digital zoom),是通过电子设备中的DSP或处理器等器件,将拍摄画面内的每个像素面积增大,从而达到放大目的。示例性的,以变焦比例为4(即4倍变焦)举例,如图3所示,使用FOV为80°的摄像头采集到拍摄画面301时,如果此时电子设备设置的变焦比例为4,说明用户希望将拍摄画面301放大4倍进行显示。那么,电子设备可以拍摄画面301的中心点A为中心,对拍摄画面301进行裁剪,保留FOV为20°(即80°/4)的拍摄画面302。进而,电子设备可将裁剪后的拍摄画面302放大显示在电子设备的预览框303中。此时,用户可在预览框303中观看到拍摄画面301进行4倍变焦后的显示效果。
在现有技术中,以手机为上述电子设备举例,手机通过摄像头获取到每一帧拍摄画面后,可先根据当前的变焦比例对该拍摄画面进行裁剪。仍如图3所示,手机获取到FOV为80°的拍摄画面301后,如果当前的变焦比例为4,则手机可将拍摄画面401裁剪为FOV为20°的拍摄画面302。并且,手机内预先为去除画面抖动设置有固定的裁剪比例(init ratio),例如,裁剪比例=10%。也就是说,手机可在拍摄画面302的基础上再次裁剪10%,以降低拍摄画面302的抖动现象。
如图4中的(a)所示,手机可通过预设的防抖算法确定拍摄画面302在x轴的第一抖动量D1以及拍摄画面302在y轴的第二抖动量D2。以第一抖动量D1为1°,第二抖动量D2为1°举例,说明本次获取的拍摄画面302沿x轴正方向产生了1°抖动,并且,拍摄画面302沿y轴正方向产生了1°抖动。
由于拍摄画面302的FOV为20°,当裁剪比例为10%时对应的防抖角度为2°(即20°*10%)。那么,仍如图4中的(a)所示,拍摄画面302按照10%的裁剪比例裁剪后还还剩余裁剪框401内大小为16°(即20°-20°*10%*2)的FOV。那么,如图4中的(b)所示,如果裁剪框401的初始位置位于拍摄画面302的中心,则手机可沿x轴负方向移动1°裁剪框401,并沿y轴负方向移动1°裁剪框401。进而,手机可按此时裁剪框401的位置裁剪拍摄画面302并输出,从而补偿拍摄画面302在x轴正方向和y轴正方向上产生的抖动。
可以看出,当拍摄画面的变焦比例为4倍变焦时,拍摄画面的防抖角度只有2°。由于上述用于补偿画面抖动的裁剪比例是固定的,因此,当拍摄画面的变焦比例越高时,拍摄画面的防抖角度会变得越小。仍以初始拍摄画面的FOV为80°,裁剪比例为10%举例,当拍摄画面的变焦比例为10倍变焦时,变焦后拍摄画面的FOV为8°(即80°/10),此时拍摄画面的防抖角度仅剩0.8°(即8°*10%)。而用户在步行时拍摄出的拍摄画面的抖动大约为3°-5°,用户在跑步时拍摄出的拍摄画面的抖动可达到10°以上。显然,现有技术中的防抖处理方法已经无法满足在高倍变焦场景下用户的防抖需求,导致拍摄画面的拍摄质量和用户的拍摄体验均降低。
对此,本申请实施例提供了一种拍摄方法,仍以手机为上述电子设备举例,如图5所示,该方法包括步骤S501-S506。
S501、手机通过摄像头获取第一拍摄画面,第一拍摄画面的变焦比例为第一变焦比例。
一般,手机的相机应用中设置有拍照、录像、全景、慢动作或延时摄影等一项或多项拍摄模式。检测到用户打开相机应用后,手机可调用相机应用进入某一拍摄模式并打开摄像头。此时,摄像头可按一定工作频率将采集每一帧拍摄画面,手机在保存或显示这些拍摄画面前,可实时的对每一帧拍摄画面进行去抖动处理,以降低拍摄画面中的抖动现象。
示例性的,如图6所示,手机打开相机应用后可显示拍照模式的预览界面601,预览界面601中包括取景窗口602,取景窗口602可用于实时显示拍照前的预览画面。另外,预览界面601中还可以包括变焦选项603。用户可以在变焦选项603中选择当前拍摄的变焦比例,例如,2倍变焦、4倍变焦或10倍变焦等。手机可根据当前的变焦比例放大或缩小显示摄像头采集到的拍摄画面。需要说明的是,变焦选项603也可以隐藏在预览界面601中,例如,手机可以根据用户在取景窗口602中的捏合操作相应的调整当前的变焦比例。当然,手机也可以使用默认的变焦比例放大或缩小显示摄像头采集到的拍摄画面,本申请实施例对此不做任何限制。
以当前的变焦比例为2倍变焦(即第一变焦比例)举例,摄像头工作后采集到的每一帧拍摄画面的FOV是固定的。例如,当摄像头的FOV为80°时,摄像头采集到的拍摄画面的FOV也为80°。例如,如图7所示,手机打开相机应用后,手机可通过摄像头采集FOV为80°的第一拍摄画面701。此时,如果手机当前的变焦比例为2倍变焦,说明用户希望将第一拍摄画面701放大2倍后显示在取景窗口602中。
需要说明的是,图6是以手机在拍照模式的预览场景下获取第一拍摄画面701举例说明的。可以理解的是,手机还可以在其他拍摄模式(例如录像、全景、慢动作或延时摄影等)中获取第一拍摄画面,例如,手机可在录像模式的预览场景下获取第一拍摄画面,也可以在录像模式的拍摄场景下获取第一拍摄画面,本申请实施例对此不做任何限制。
S502、手机根据第一变焦比例确定第一拍摄画面的第一裁减比例。
在本申请实施例中,手机获取到上述第一拍摄画面701后,可根据当前实时的变焦比例为第一拍摄画面701设置对应的裁减比例,从而对第一拍摄画面701进行剪裁。如果当前的变焦比例较大,则手机可为第一拍摄画面701设置较大的裁减比例;相应的,如果当前的变焦比例较小,则手机可为第一拍摄画面701设置较小的裁减比例。
示例性的,手机每获取到一帧拍摄画面后,均可按照下述公式(1)计算当前拍摄画面的裁减比例(crop_ratio)。
Figure BDA0002176268860000091
其中,zoom_ratio为当前的变焦比例,init_ratio为预设的初始裁减比例,例如,init_ratio可以为常数10%。
那么,仍以第一变焦比例为2倍变焦举例,手机获取到第一拍摄画面701后,可根据上述公式(1)
Figure BDA0002176268860000092
也就是说,在2倍变焦的场景下,需要对FOV为80°的第一拍摄画面701裁剪30%,从而达到2倍变焦的变焦需求。
在另一些实施例中,如表1所示,也可以在手机中预先存储在一定FOV(例如80°)下,不同变焦比例与不同裁减比例之间的对应关系。这样,当手机获取到第一拍摄画面701后,可查询当前的第一变焦比例。进而,手机可根据表1所示的对应关系确定与第一变焦比例对应的第一拍摄画面701的第一裁减比例为30%。
表1
变焦比例(zoom_ratio) 1 2 4 10
裁减比例(crop_ratio) 10% 30% 40% 46%
可以看出,本申请实施例中对每一帧拍摄画面设置的裁减比例是结合当前的变焦比例动态变化的。而现有技术中为每一帧拍摄画面设置的裁减比例是固定不变的,例如10%的固定裁剪比例。那么,在现有技术中每获取到一帧拍摄画面后,需要先根据当前的变焦比例进行一次剪裁以满足当前的变焦需求,再按照固定的10%的裁剪比例进行第二次剪裁以补偿拍摄画面中出现的画面抖动。
在本申请实施例中,手机可结合当前的变焦比例一次性为拍摄画面确定出对应的裁剪比例(即上述crop_ratio),后续手机按照该裁剪比例对拍摄画面进行一次剪裁即可。这样一来,手机可基于整个拍摄画面(第一拍摄画面701)进行一次剪裁,剪裁过程中可用于补偿画面抖动的防抖角度增加,使得手机拍摄出的拍摄画面在较大的抖动下仍可获得较为稳定的拍摄效果。
以第一拍摄画面701的裁剪比例(crop_ratio)为30%举例,如图8所示,FOV为80°的第一拍摄画面701裁剪30%后还剩余32°的FOV,因此,手机可在第一拍摄画面701中确定出裁剪框801的FOV大小为32°。当裁剪框801位于第一拍摄画面701的中心时,裁剪框801各条边界距离第一拍摄画面701的对应边界还剩余24°的FOV。手机后续可通过移动裁剪框801确定具体剪裁位置,从而补偿手机抖动产生的画面偏移。而上述剩余的24°的FOV均可用于补偿手机抖动产生的画面偏移,也就是说,在2倍变焦的场景下,拍摄画面的防抖角度可达到24°,从而提高拍摄的防抖性能。
示例性的,仍以拍摄画面的FOV为80°举例,如表2所示,按照上述方法手机可在不同变焦场景下获得不同的防抖角度。相比于现有技术中防抖角度随变焦比例的增大而减小的情况,在本实施例提供的拍摄方法中,拍摄画面的防抖角度可随变焦比例的增大而增大,从而在高倍变焦的场景下仍然能够获得较好的防抖效果。
表2
变焦比例(zoom_ratio) 1 2 4 10
裁减比例(crop_ratio) 10% 30% 40% 46%
防抖角度 24° 32° 36.8°
S503、手机按照上述第一裁减比例剪裁第一拍摄画面。
仍以上述第一拍摄画面701举例,仍如图8所示,当第一拍摄画面701的裁减比例为30%时,手机可以确定第一拍摄画面701中裁剪框801的FOV大小为32°。进而,手机可根据第一拍摄画面701的抖动情况确定裁剪框801在第一拍摄画面701中的具体位置并进行剪裁,从而补偿第一拍摄画面701发生的画面抖动。
例如,如果检测到第一拍摄画面701向左抖动了3°,则手机可将裁剪框801从第一拍摄画面701的中心向右平移3°,从而补偿第一拍摄画面701向左抖动3°产生的画面偏移。又例如,如果检测到第一拍摄画面701向上抖动了5°,则手机可将裁剪框801从第一拍摄画面701的中心向下平移5°,从而补偿第一拍摄画面701向上抖动5°产生的画面偏移。
示例性的,手机通过摄像头在采集第一拍摄画面701的同时,还可以开启陀螺仪等传感器检测手机在x轴和y轴上的实际位移,即第一拍摄画面701在x轴上的实际位移S1以及第一拍摄画面701在y轴上的实际位移S2。或者,手机可以获取与第一拍摄画面701相邻的上一帧拍摄画面,进而通过OIS(optical image stabilization,光学防抖)算法或光流算法计算第一拍摄画面701在x轴上的实际位移S1以及第一拍摄画面701在y轴上的实际位移S2。
一般,拍摄画面在x轴和y轴上的实际位移(即上述S1、S2)一部分是由于用户的真实运动产生的,另一部分由于手机抖动产生的。为了确定出第一拍摄画面701由于手机抖动在x轴和y轴上产生的抖动量,手机获取到第一拍摄画面701后,可结合最近N(N>1)帧拍摄画面预测在拍摄第一拍摄画面701时用户在x轴的运动位移Y1和用户在y轴的运动位移Y2。那么,手机可计算出第一拍摄画面701在x轴的第一抖动量D1=S1-Y1,第一拍摄画面701在y轴的第二抖动量D2=S2-Y2。
示例性的,以第一拍摄画面701在x轴的第一抖动量D1为10°,第一拍摄画面701在y轴的第二抖动量D2为5°举例,说明第一拍摄画面701沿x轴正方向产生了10°抖动,并沿y轴正方向产生了5°抖动。此时,如图9所示,手机可将第一拍摄画面701中的裁剪框801沿x轴负方向移动10°,从而补偿第一拍摄画面701在x轴负方向上抖动10°产生的画面偏移;并且,手机可将第一拍摄画面701中的裁剪框801沿y轴负方向移动5°,从而补偿第一拍摄画面701在y轴正方向上抖动5°产生的画面偏移。
由于第一拍摄画面701的防抖角度为24°,也就是说,当第一拍摄画面701在x轴正方向(或负方向)上产生24°以内的抖动,和/或,第一拍摄画面701在y轴正方向(或负方向)上产生24°以内的抖动时,手机均可通过调整剪裁框801的方法补偿因抖动而产生的画面偏移,使得手机的防抖效果得到明显提升。
另外,手机在拍摄第一拍摄画面701时还有可能在z轴方向上产生抖动。第一拍摄画面701在z轴方向上产生的抖动会导致第一拍摄画面701中的图像发生变形。那么,手机除了通过调整剪裁框801去除第一拍摄画面701中的抖动现象外,还可以使用预设的warp(变形)算法去除第一拍摄画面701中的图像变形,进一步提高手机的防抖效果。
如图10所示,手机根据第一拍摄画面701在x轴和y轴的抖动量确定出裁剪框801的具体位置后,可按照裁剪框801所在的位置剪裁第一拍摄画面701,得到第一拍摄画面701剪裁后的拍摄画面1001。进而,手机可将剪裁后的拍摄画面1001放大显示在预览界面601的取景窗口602中。此时,拍摄画面1001既满足当前2倍变焦的变焦需求,同时补偿了手机因抖动产生的画面偏移,使用户获取较好的拍摄体验。
在一些实施例中,手机裁剪第一拍摄画面701得到拍摄画面1001后,可以先将拍摄画面1001存储在手机的缓存中。例如,可将拍摄画面1001存储在预览缓存或视频缓存中。在拍照或拍摄视频的预览场景下,手机可从预览缓存中实时获取已经剪裁的各个拍摄画面,并输出在预览界面601的取景窗口602中。在视频的拍摄过程中,手机可从视频缓存中实时获取已经剪裁的各个拍摄画面,并将这些拍摄画面编码为本次录制的视频进行保存。
上述实施例中是以手机获取到第一拍摄画面701后,根据当前的变焦比例对第一拍摄画面701进行剪裁为例说明的。可以理解的是,在变焦比例为第一变焦比例(例如上述2倍变焦)的情况下,手机获取到每帧拍摄画面后均可按照S501-S503所述的方法对拍摄画面进行剪裁,从实现拍摄画面的变焦以及防抖功能。
S504、响应于用户的变焦操作,手机通过摄像头获取第二拍摄画面,第二拍摄画面的变焦比例为第二变焦比例。
在预览或拍摄视频的过程中,用户还可以手动调整当前的变焦比例。例如,如图11所示,用户可在预览界面601中滑动变焦选项603,将拍摄画面从2倍变焦(即第一变焦比例)调整为4倍变焦(即第二变焦比例)。手机检测到用户输入的这一变焦操作后,可更新当前的变焦比例为4倍变焦。
同时,与步骤S501类似的,手机还可以响应上述变焦操作通过摄像头获取第二拍摄画面,如图12所示,第二拍摄画面1201的FOV也为80°,与第一拍摄画面701不同的是,手机当前的变焦比例为4倍变焦,说明用户希望将第二拍摄画面1201放大4倍后显示在取景窗口602中。
在一些实施例中,手机检测到用户输入的变焦操作后,还可以更换正在使用的摄像头。例如,检测到用户将拍摄画面从2倍变焦调整为4倍变焦时,手机可将正在使用的FOV为80°的广角镜头切换为FOV为40°的长焦镜头。此时,手机获取到的第二拍摄画面的FOV为40°。
S505、手机根据第二变焦比例确定第二拍摄画面的第二裁减比例。
与步骤S502类似的,手机获取到第二拍摄画面1201后,也可根据上述公式(1)或表1所示的对应关系确定第二拍摄画面1201的裁减比例(即第二裁减比例)。
仍以第二变焦比例为4倍变焦举例,手机获取到第二拍摄画面1201后,可根据上述公式(1)
Figure BDA0002176268860000111
也就是说,在4倍变焦的场景下,需要对FOV为80°的第二拍摄画面1201裁剪40%,从而达到4倍变焦的变焦需求。
当第二拍摄画面1201的第二裁减比例为40%时,如图13所示,FOV为80°的第二拍摄画面1201裁剪40%后还剩余16°的FOV,因此手机可在第二拍摄画面1201中确定出裁剪框1301的FOV大小为16°。当裁剪框1301位于第二拍摄画面1201的中心时,裁剪框1301各条边界距离第二拍摄画面1201的对应边界还剩余32°的FOV。手机通过移动裁剪框1301可补偿手机抖动产生的画面偏移,而上述剩余的32°的FOV均可用于补偿手机抖动产生的画面偏移,也就是说,在4倍变焦的场景下,拍摄画面的防抖角度可达到32°,拍摄时的防抖性能将显著提高。
需要说明的是,上述实施例中是以手机变焦后仍使用FOV为80°的摄像头进行拍摄为例说明的。可以理解的是,如果响应于用户的变焦操作手机更换了其他FOV(例如FOV为40°)的摄像头,则手机中还可以存储FOV为40°时不同变焦比例与不同裁减比例之间的对应关系,进而,手机可根据上述第二变焦比例确定第二拍摄画面1201的第二裁减比例。
S506、手机按照上述第二裁减比例剪裁第二拍摄画面。
仍以上述第二拍摄画面1201举例,仍如图13所示,当第二拍摄画面1201的裁减比例为40%时,手机可以确定第二拍摄画面1201中裁剪框1301的FOV大小为16°。进而,与步骤S503类似的,手机可根据第二拍摄画面1201在x轴的第一抖动量D1,以及第二拍摄画面1201在y轴的第二抖动量D2,确定裁剪框1301在第二拍摄画面1201中的具体位置并进行剪裁,从而补偿第二拍摄画面1201发生的画面抖动。
以第二拍摄画面1201在x轴的第一抖动量D1为20°,第二拍摄画面1201在y轴的第二抖动量D2为25°举例,说明第一拍摄画面701沿x轴正方向产生了20°抖动,并沿y轴正方向产生了25°抖动。此时,如图14所示,手机可将第二拍摄画面1201中的裁剪框1301沿x轴负方向移动20°,从而补偿第二拍摄画面1201在x轴正方向上抖动20°产生的画面偏移;并且,手机可将第二拍摄画面1201中的裁剪框1301沿y轴负方向移动25°,从而补偿第二拍摄画面1201在y轴正方向上抖动25°产生的画面偏移。
由于第二拍摄画面1201的防抖角度为32°,也就是说,当第二拍摄画面1201在x轴正方向(或负方向)上产生32°以内的抖动,和/或,第二拍摄画面1201在y轴正方向(或负方向)上产生32°以内的抖动时,手机均可通过调整剪裁框1301的方法补偿因抖动而产生的画面偏移,使得手机的防抖效果得到明显提升。
进一步地,如图15所示,手机根据第二拍摄画面1201在x轴和y轴的抖动量确定出裁剪框1301的具体位置后,可按照裁剪框1301剪裁第二拍摄画面1201,得到第二拍摄画面1201剪裁后的拍摄画面1501。进而,手机可将剪裁后的拍摄画面1501放大显示在预览界面601的取景窗口602中。此时,拍摄画面1501既满足当前4倍变焦的变焦需求,同时补偿了手机因抖动产生的画面偏移,使用户获取较好的拍摄体验。
示例性的,当手机在预览界面601的取景窗口602中显示出拍摄画面1501时,如果检测到用户点击预览界面601中的拍照按钮,则手机可将此时取景窗口602中显示的拍摄画面1501作为本次的拍摄照片保存在手机相册中。
或者,当手机在预览界面601的取景窗口602中显示出拍摄画面1501时,如果检测到用户点击预览界面601中的拍照按钮,则手机可获取此时摄像头采集到的拍摄画面,并按照上述步骤S505-S506中的裁剪方法对采集到的拍摄画面进行变焦和去抖动处理,并将裁剪后的拍摄画面作为本次的拍摄照片保存在手机相册中。
可以看出,无论在拍照场景或视频场景下,无论在预览场景或录制场景下,手机获取到每一帧拍摄画面后,均可按照当前的变焦比例动态的设置本次拍摄画面的裁减比例,该裁减比例可满足当前的变焦需求。并且,手机可按照该裁减比例在拍摄画面中确定具体的剪裁位置,从而补偿手机因抖动产生的画面偏移。由于当变焦比例越大时拍摄画面对应的裁减比例越大,因此,当变焦比例越大时,手机裁剪拍摄画面时剩余的可用于补偿画面抖动的防抖角度越大,这样,在高倍变焦的拍摄场景下手机依然可以校正抖动角度较大的拍摄画面,从而提高拍摄画面的防抖性能以及用户的拍摄体验。
另外,在拍摄运动的物体时,手机也可按照上述方法对拍摄画面进行裁剪,从而满足当前的变焦比例并降低拍摄画面中的抖动现象。
示例性的,如图16中的(a)所示,手机获取到拍摄画面A后,可通过预设的图像识别算法识别出拍摄画面A中的运动物体1601,即当前的拍摄目标为运动物体1601。并且,如果当前的变焦比例为2倍变焦,则手机可按照上述实施例所述的方法确定出拍摄画面A的剪裁比例为30%,进而手机可确定拍摄画面A中剪裁框1602的大小。进而,手机可根据运动物体1601在拍摄画面A中的抖动量确定剪裁框1602的具体位置,使得运动物体1601在裁剪后仍然占据拍摄画面的主体位置。
当用户将变焦比例从2倍变焦调整为4倍变焦时,如图16中的(b)所示,手机可获取到拍摄画面B,并识别出拍摄画面B中的运动物体1601。如果当前的变焦比例为4倍变焦,则手机可按照上述实施例所述的方法确定出拍摄画面B的剪裁比例为40%,进而手机可确定拍摄画面B中剪裁框1603的大小。进而,手机可根据运动物体1601在拍摄画面B中的抖动量确定剪裁框1603的具体位置,使得运动物体1601在裁剪后仍然占据拍摄画面的主体位置。
当用户将变焦比例从4倍变焦调整为10倍变焦时,如图16中的(c)所示,手机可获取到拍摄画面C,并识别出拍摄画面C中的运动物体1601。如果当前的变焦比例为10倍变焦,则手机可按照上述实施例所述的方法确定出拍摄画面C的剪裁比例为46%,进而手机可确定拍摄画面C中剪裁框1604的大小。进而,手机可根据运动物体1601在拍摄画面C中的抖动量确定剪裁框1604的具体位置,使得运动物体1601在裁剪后仍然占据拍摄画面的主体位置。
可以看出,在拍摄运动的物体时,运动的物体可能会随机的出现在拍摄画面的不同位置。那么,手机获取到每一帧拍摄画面后,均可根据当前的变焦比例确定本次拍摄画面的裁减比例,并按照该裁减比例保留拍摄画面中的运动物体,使得运动物体能够平稳的出现在拍摄画面的主体位置,降低用户拍摄时的构图难度。
本申请实施例公开了一种电子设备,包括处理器,以及与处理器相连的存储器、输入设备和输出设备。其中,输入设备和输出设备可集成为一个设备,例如,可将触摸传感器作为输入设备,将显示屏作为输出设备,并将触摸传感器和显示屏集成为触摸屏。
此时,如图17所示,上述电子设备可以包括:触摸屏1701,所述触摸屏1701包括触摸传感器1706和显示屏1707;一个或多个处理器1702;一个或多个摄像头1708;存储器1703;一个或多个应用程序(未示出);以及一个或多个计算机程序1704,上述各器件可以通过一个或多个通信总线1705连接。其中该一个或多个计算机程序1704被存储在上述存储器1703中并被配置为被该一个或多个处理器1702执行,该一个或多个计算机程序1704包括指令,上述指令可以用于执行上述实施例中的各个步骤。其中,上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应实体器件的功能描述,在此不再赘述。
示例性的,上述处理器1702具体可以为图1所示的处理器110,上述存储器1703具体可以为图1所示的内部存储器121,上述摄像头1708具体可以为图1所示的摄像头193,上述显示屏1707具体可以为图1所示的显示屏194,上述触摸传感器1706具体可以为图1所示的传感器模块180中的触摸传感器,本申请实施例对此不做任何限制。
通过以上的实施方式的描述,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请实施例各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:快闪存储器、移动硬盘、只读存储器、随机存取存储器、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请实施例的具体实施方式,但本申请实施例的保护范围并不局限于此,任何在本申请实施例揭露的技术范围内的变化或替换,都应涵盖在本申请实施例的保护范围之内。因此,本申请实施例的保护范围应以所述权利要求的保护范围为准。

Claims (21)

1.一种拍摄方法,其特征在于,包括:
电子设备通过第一摄像头获取第一拍摄画面,所述第一拍摄画面的变焦比例为第一变焦比例;
所述电子设备根据所述第一变焦比例确定所述第一拍摄画面的第一裁剪比例,所述第一拍摄画面的防抖角度为所述第一摄像头的视场角FOV与所述第一裁剪比例的乘积;
所述电子设备按照所述第一裁剪比例裁剪所述第一拍摄画面,得到第一剪裁画面并输出;
响应于用户输入的第一变焦操作,所述电子设备通过所述第一摄像头获取第二拍摄画面,所述第二拍摄画面的变焦比例为第二变焦比例,所述第二变焦比例大于所述第一变焦比例;
所述电子设备根据所述第二变焦比例确定所述第二拍摄画面的第二裁剪比例,所述第二裁剪比例大于所述第一裁剪比例,所述第二拍摄画面的防抖角度为所述第一摄像头的FOV与所述第二裁剪比例的乘积;
所述电子设备按照所述第二裁剪比例裁剪所述第二拍摄画面,得到第二剪裁画面并输出。
2.根据权利要求1所述的方法,其特征在于,
所述电子设备根据所述第一变焦比例确定所述第一拍摄画面的第一裁剪比例,包括:
所述电子设备根据所述第一变焦比例按照预设的公式计算所述第一裁剪比例;
所述电子设备根据所述第二变焦比例确定所述第二拍摄画面的第二裁剪比例,包括:
所述电子设备根据所述第二变焦比例按照预设的公式计算所述第二裁剪比例;
其中,所述预设的公式为:
Figure FDA0003358014240000011
其中,zoom_ratio为当前的变焦比例,init_ratio为常数。
3.根据权利要求1所述的方法,其特征在于,所述电子设备中存储有不同变焦比例与不同裁减比例之间的对应关系;
所述电子设备根据所述第一变焦比例确定所述第一拍摄画面的第一裁剪比例,包括:
所述电子设备根据所述对应关系,确定与所述第一变焦比例对应的第一裁剪比例;
所述电子设备根据所述第二变焦比例确定所述第二拍摄画面的第二裁剪比例,包括:
所述电子设备根据所述对应关系,确定与所述第二变焦比对应的第二裁剪比例。
4.根据权利要求1-3中任一项所述的方法,其特征在于,所述电子设备按照所述第一裁剪比例裁剪所述第一拍摄画面,得到第一剪裁画面,包括:
所述电子设备按照所述第一裁剪比例计算第一剪裁框的大小;
所述电子设备在所述第一拍摄画面中确定所述第一剪裁框的位置;
所述电子设备沿所述所述第一剪裁框的位置剪裁所述第一拍摄画面,得到第一剪裁画面。
5.根据权利要求4所述的方法,其特征在于,所述电子设备在所述第一拍摄画面中确定所述第一剪裁框的位置,包括:
所述电子设备获取所述第一拍摄画面在x轴上的第一抖动方向和第一抖动量,并获取所述第一拍摄画面在y轴上的第二抖动方向和第二抖动量;
所述电子设备从第一初始位置开始,沿所述第一抖动方向的反方向将所述第一剪裁框在x轴上移动所述第一抖动量,并沿所述第二抖动方向的反方向将所述第一剪裁框在y轴上移动所述第二抖动量,所述第一初始位置是指所述第一剪裁框位于所述第一拍摄画面的中心。
6.根据权利要求1-3中任一项所述的方法,其特征在于,所述电子设备按照所述第二裁剪比例裁剪所述第二拍摄画面,得到第二剪裁画面,包括:
所述电子设备按照所述第二裁剪比例计算第二剪裁框的大小;
所述电子设备在所述第二拍摄画面中确定所述第二剪裁框的位置;
所述电子设备沿所述所述第二剪裁框的位置剪裁所述第二拍摄画面,得到第二剪裁画面。
7.根据权利要求6所述的方法,其特征在于,所述电子设备在所述第二拍摄画面中确定所述第二剪裁框的位置,包括:
所述电子设备获取所述第二拍摄画面在x轴上的第一抖动方向和第一抖动量,并获取所述第二拍摄画面在y轴上的第二抖动方向和第二抖动量;
所述电子设备从第二初始位置开始,沿所述第一抖动方向的反方向将所述第二剪裁框在x轴上移动所述第一抖动量,并沿所述第二抖动方向的反方向将所述第二剪裁框在y轴上移动所述第二抖动量,所述第二初始位置是指所述第二剪裁框位于所述第二拍摄画面的中心。
8.根据权利要求4所述的方法,其特征在于,所述第一剪裁框中包括所述第一拍摄画面内的运动物体;所述第二剪裁框中包括所述第二拍摄画面内的运动物体。
9.根据权利要求1-3中任一项所述的方法,其特征在于,所述方法还包括:
响应于用户输入的第二变焦操作,所述电子设备通过第二摄像头获取第三拍摄画面,所述第二摄像头的FOV与所述第一摄像头的FOV不同。
10.根据权利要求1-3中任一项所述的方法,其特征在于,所述电子设备通过第一摄像头获取第一拍摄画面,包括:
所述电子设备在预览场景、视频拍摄场景或照片拍摄场景中使用所述第一摄像头获取第一拍摄画面。
11.一种电子设备,其特征在于,包括:
触摸屏,所述触摸屏包括触摸传感器和显示屏;
一个或多个摄像头;
一个或多个处理器;
存储器;
其中,所述存储器中存储有一个或多个计算机程序,所述一个或多个计算机程序包括指令,当所述指令被所述电子设备执行时,使得所述电子设备执行以下步骤:
通过第一摄像头获取第一拍摄画面,所述第一拍摄画面的变焦比例为第一变焦比例;
根据所述第一变焦比例确定所述第一拍摄画面的第一裁剪比例,所述第一拍摄画面的防抖角度为所述第一摄像头的视场角FOV与所述第一裁剪比例的乘积;
按照所述第一裁剪比例裁剪所述第一拍摄画面,得到第一剪裁画面并输出;
响应于用户输入的第一变焦操作,通过所述第一摄像头获取第二拍摄画面,所述第二拍摄画面的变焦比例为第二变焦比例,所述第二变焦比例大于所述第一变焦比例;
根据所述第二变焦比例确定所述第二拍摄画面的第二裁剪比例,所述第二裁剪比例大于所述第一裁剪比例,所述第二拍摄画面的防抖角度为所述第一摄像头的FOV与所述第二裁剪比例的乘积;
按照所述第二裁剪比例裁剪所述第二拍摄画面,得到第二剪裁画面并输出。
12.根据权利要求11所述的电子设备,其特征在于,所述电子设备根据所述第一变焦比例确定所述第一拍摄画面的第一裁剪比例,具体包括:
根据所述第一变焦比例按照预设的公式计算所述第一裁剪比例;
所述电子设备根据所述第二变焦比例确定所述第二拍摄画面的第二裁剪比例,具体包括:
根据所述第二变焦比例按照预设的公式计算所述第二裁剪比例;
其中,所述预设的公式为:
Figure FDA0003358014240000031
其中,zoom_ratio为当前的变焦比例,init_ratio为常数。
13.根据权利要求11所述的电子设备,其特征在于,所述存储器中存储有不同变焦比例与不同裁减比例之间的对应关系;
所述电子设备根据所述第一变焦比例确定所述第一拍摄画面的第一裁剪比例,具体包括:
根据所述对应关系,确定与所述第一变焦比例对应的第一裁剪比例;
所述电子设备根据所述第二变焦比例确定所述第二拍摄画面的第二裁剪比例,具体包括:
根据所述对应关系,确定与所述第二变焦比对应的第二裁剪比例。
14.根据权利要求11-13中任一项所述的电子设备,其特征在于,所述电子设备按照所述第一裁剪比例裁剪所述第一拍摄画面,得到第一剪裁画面,具体包括:
按照所述第一裁剪比例计算第一剪裁框的大小;
在所述第一拍摄画面中确定所述第一剪裁框的位置;
沿所述所述第一剪裁框的位置剪裁所述第一拍摄画面,得到第一剪裁画面。
15.根据权利要求14所述的电子设备,其特征在于,所述电子设备在所述第一拍摄画面中确定所述第一剪裁框的位置,具体包括:
获取所述第一拍摄画面在x轴上的第一抖动方向和第一抖动量,并获取所述第一拍摄画面在y轴上的第二抖动方向和第二抖动量;
从第一初始位置开始,沿所述第一抖动方向的反方向将所述第一剪裁框在x轴上移动所述第一抖动量,并沿所述第二抖动方向的反方向将所述第一剪裁框在y轴上移动所述第二抖动量,所述第一初始位置是指所述第一剪裁框位于所述第一拍摄画面的中心。
16.根据权利要求11-13中任一项所述的电子设备,其特征在于,所述电子设备按照所述第二裁剪比例裁剪所述第二拍摄画面,得到第二剪裁画面,具体包括:
按照所述第二裁剪比例计算第二剪裁框的大小;
在所述第二拍摄画面中确定所述第二剪裁框的位置;
沿所述所述第二剪裁框的位置剪裁所述第二拍摄画面,得到第二剪裁画面。
17.根据权利要求16所述的电子设备,其特征在于,所述电子设备在所述第二拍摄画面中确定所述第二剪裁框的位置,具体包括:
获取所述第二拍摄画面在x轴上的第一抖动方向和第一抖动量,并获取所述第二拍摄画面在y轴上的第二抖动方向和第二抖动量;
从第二初始位置开始,沿所述第一抖动方向的反方向将所述第二剪裁框在x轴上移动所述第一抖动量,并沿所述第二抖动方向的反方向将所述第二剪裁框在y轴上移动所述第二抖动量,所述第二初始位置是指所述第二剪裁框位于所述第二拍摄画面的中心。
18.根据权利要求14所述的电子设备,其特征在于,所述第一剪裁框中包括所述第一拍摄画面内的运动物体;所述第二剪裁框中包括所述第二拍摄画面内的运动物体。
19.根据权利要求11-13中任一项所述的电子设备,其特征在于,所述电子设备还用于执行:
响应于用户输入的第二变焦操作,通过第二摄像头获取第三拍摄画面,所述第二摄像头的FOV与所述第一摄像头的FOV不同。
20.根据权利要求11-13中任一项所述的电子设备,其特征在于,所述电子设备通过第一摄像头获取第一拍摄画面,具体包括:
在预览场景、视频拍摄场景或照片拍摄场景中使用所述第一摄像头获取第一拍摄画面。
21.一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,其特征在于,当所述指令在电子设备上运行时,使得所述电子设备执行如权利要求1-10中任一项所述的拍摄方法。
CN201910780029.9A 2019-08-22 2019-08-22 一种拍摄方法及电子设备 Active CN112422805B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201910780029.9A CN112422805B (zh) 2019-08-22 2019-08-22 一种拍摄方法及电子设备
EP20855110.1A EP4016987A4 (en) 2019-08-22 2020-08-19 PHOTOGRAPHY PROCESS AND ELECTRONIC DEVICE
US17/636,954 US11700452B2 (en) 2019-08-22 2020-08-19 Photographing method and electronic device
PCT/CN2020/110008 WO2021032117A1 (zh) 2019-08-22 2020-08-19 一种拍摄方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910780029.9A CN112422805B (zh) 2019-08-22 2019-08-22 一种拍摄方法及电子设备

Publications (2)

Publication Number Publication Date
CN112422805A CN112422805A (zh) 2021-02-26
CN112422805B true CN112422805B (zh) 2022-02-18

Family

ID=74659950

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910780029.9A Active CN112422805B (zh) 2019-08-22 2019-08-22 一种拍摄方法及电子设备

Country Status (4)

Country Link
US (1) US11700452B2 (zh)
EP (1) EP4016987A4 (zh)
CN (1) CN112422805B (zh)
WO (1) WO2021032117A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220099210A (ko) * 2021-01-05 2022-07-13 삼성디스플레이 주식회사 표시 장치, 이를 포함하는 가상 현실 표시 시스템 및 이를 이용한 입력 영상 기반 사용자 움직임 추정 방법
CN113824876B (zh) * 2021-08-12 2023-07-18 惠州Tcl云创科技有限公司 数字变焦下画面稳定性处理方法、装置、移动终端及介质
WO2023160220A1 (zh) * 2022-02-28 2023-08-31 荣耀终端有限公司 一种图像处理方法和电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09102903A (ja) * 1995-10-05 1997-04-15 Hitachi Ltd 撮像装置
CN106998459A (zh) * 2017-03-15 2017-08-01 河南师范大学 一种连续变焦技术的单摄像头立体图像生成方法
CN109831622A (zh) * 2019-01-03 2019-05-31 华为技术有限公司 一种拍摄方法及电子设备
CN110072070A (zh) * 2019-03-18 2019-07-30 华为技术有限公司 一种多路录像方法及设备

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5020805B2 (ja) 2007-12-28 2012-09-05 キヤノン株式会社 撮像装置及びその制御方法
JP5657235B2 (ja) * 2009-11-10 2015-01-21 オリンパスイメージング株式会社 画像撮像装置及び画像撮像方法
JP6103526B2 (ja) * 2013-03-15 2017-03-29 オリンパス株式会社 撮影機器,画像表示機器,及び画像表示機器の表示制御方法
US11927874B2 (en) * 2014-07-01 2024-03-12 Apple Inc. Mobile camera system
US9392174B2 (en) * 2014-12-11 2016-07-12 Facebook, Inc. Systems and methods for time-lapse selection subsequent to capturing media content
US9800798B2 (en) * 2015-02-13 2017-10-24 Qualcomm Incorporated Systems and methods for power optimization for imaging devices with dual cameras
US9781350B2 (en) 2015-09-28 2017-10-03 Qualcomm Incorporated Systems and methods for performing automatic zoom
JP6590628B2 (ja) * 2015-10-09 2019-10-16 キヤノン株式会社 撮像装置、その制御方法、およびプログラム、並びに記憶媒体
US9967461B2 (en) * 2015-10-14 2018-05-08 Google Inc. Stabilizing video using transformation matrices
JP6735583B2 (ja) * 2016-03-17 2020-08-05 キヤノン株式会社 ズーム制御装置、撮像装置及びそれらの制御方法、プログラム並びに記憶媒体
CN107770433B (zh) * 2016-08-15 2020-08-04 广州立景创新科技有限公司 影像获取装置及其影像平顺缩放方法
KR102600504B1 (ko) * 2016-09-07 2023-11-10 삼성전자주식회사 전자 장치 및 그 제어 방법
CN106454105A (zh) * 2016-10-28 2017-02-22 努比亚技术有限公司 图像处理装置及方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09102903A (ja) * 1995-10-05 1997-04-15 Hitachi Ltd 撮像装置
CN106998459A (zh) * 2017-03-15 2017-08-01 河南师范大学 一种连续变焦技术的单摄像头立体图像生成方法
CN109831622A (zh) * 2019-01-03 2019-05-31 华为技术有限公司 一种拍摄方法及电子设备
CN110072070A (zh) * 2019-03-18 2019-07-30 华为技术有限公司 一种多路录像方法及设备

Also Published As

Publication number Publication date
US11700452B2 (en) 2023-07-11
EP4016987A4 (en) 2022-09-21
US20220360715A1 (en) 2022-11-10
EP4016987A1 (en) 2022-06-22
WO2021032117A1 (zh) 2021-02-25
CN112422805A (zh) 2021-02-26

Similar Documents

Publication Publication Date Title
CN110072070B (zh) 一种多路录像方法及设备、介质
WO2022262260A1 (zh) 一种拍摄方法及电子设备
WO2020073959A1 (zh) 图像捕捉方法及电子设备
CN108605097B (zh) 光学成像方法及其装置
CN110381276B (zh) 一种视频拍摄方法及电子设备
CN111050062B (zh) 一种拍摄方法及电子设备
CN112422805B (zh) 一种拍摄方法及电子设备
CN114205515B (zh) 一种视频的防抖处理方法及电子设备
MX2007010355A (es) Metodos, dispositivos electronicos, y productos de programas de computadora para procesar imagenes que utilizan memorias intermedias multiples de imagenes.
CN112954251B (zh) 视频处理方法、视频处理装置、存储介质与电子设备
CN113810590A (zh) 图像处理方法、电子设备、介质和系统
CN111835973A (zh) 拍摄方法、拍摄装置、存储介质与移动终端
CN111800581B (zh) 图像生成方法、图像生成装置、存储介质与电子设备
CN113810622B (zh) 一种图像处理方法及设备
CN115412678A (zh) 曝光处理方法、装置及电子设备
CN112637481B (zh) 图像缩放方法和装置
CN111626931A (zh) 图像处理方法、图像处理装置、存储介质与电子设备
CN115297269B (zh) 曝光参数的确定方法及电子设备
CN117479008B (zh) 一种视频处理方法、电子设备及芯片系统
CN117714858A (zh) 一种图像处理方法、电子设备及可读存储介质
CN115209062A (zh) 一种图像处理方法及装置
CN117479008A (zh) 一种视频处理方法、电子设备及芯片系统
CN116582743A (zh) 一种拍摄方法、电子设备及介质
CN115696067A (zh) 终端的图像处理方法、装置和终端设备
CN113382162A (zh) 一种视频拍摄方法及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant