CN112153301B - 拍摄方法和电子设备 - Google Patents
拍摄方法和电子设备 Download PDFInfo
- Publication number
- CN112153301B CN112153301B CN202011035200.2A CN202011035200A CN112153301B CN 112153301 B CN112153301 B CN 112153301B CN 202011035200 A CN202011035200 A CN 202011035200A CN 112153301 B CN112153301 B CN 112153301B
- Authority
- CN
- China
- Prior art keywords
- shutter time
- target
- module
- data
- shooting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
Abstract
本申请公开了一种拍摄方法及电子设备,属于电子技术领域,以解决现有的曝光技术导致动态拍摄出现画面拖影的现象的问题。其中,所述方法包括:在摄像头模组采集图像的情况下,获取DVS模组在触发事件中生成的数据流;根据获取的数据流,获得拍摄主体的移动速度值;根据移动速度值,获得最大快门时间;接收用户的第一输入;响应于第一输入,根据采集图像的画面亮度,生成目标快门时间;在最大快门时间大于或者等于目标快门时间的情况下,基于目标快门时间,对目标区域进行曝光;在最大快门时间小于目标快门时间的情况下,基于最大快门时间,对目标区域进行曝光。本申请中的拍摄方法应用于电子设备中。
Description
技术领域
本申请属于电子技术领域,具体涉及一种拍摄方法和电子设备。
背景技术
电子设备在拍摄时,为了得到足够亮的图像,通常会在拍摄过程中实现自动曝光。
在现有的曝光技术中,仅针对预览图像中的静态部分,从而导致拍摄过程中,若拍摄主体移动,则会产生画面拖影的现象,拍摄主体移动得越快,画面的拖影越严重。
因此,在实现本申请过程中,发明人发现现有技术中至少存在如下问题:现有的曝光技术导致动态拍摄出现画面拖影的现象。
发明内容
本申请实施例的目的是提供一种拍摄方法,能够解决现有的曝光技术导致动态拍摄出现画面拖影的现象的问题。
为了解决上述技术问题,本申请是这样实现的:
第一方面,本申请实施例提供了一种拍摄方法,应用于拍摄装置,所述拍摄装置包括摄像头模组,所述拍摄装置还包括DVS模组,所述DVS模组的视场角覆盖所述摄像头模组的视场角;所述方法包括:在所述摄像头模组采集图像的情况下,获取所述DVS模组在触发事件中生成的数据流;其中,所述触发事件为采集图像中的拍摄主体在移动状态下产生的触发事件;根据获取的所述数据流,获得所述拍摄主体的移动速度值;根据所述移动速度值,获得最大快门时间;接收用户的第一输入;响应于所述第一输入,根据采集图像的画面亮度,生成目标快门时间;在所述最大快门时间大于或者等于所述目标快门时间的情况下,基于所述目标快门时间,对目标区域进行曝光;在所述最大快门时间小于所述目标快门时间的情况下,基于所述最大快门时间,对目标区域进行曝光。
第二方面,本申请实施例提供了一种拍摄装置,包括摄像头模组,所述拍摄装置还包括DVS模组,所述DVS模组的视场角覆盖所述摄像头模组的视场角;所述拍摄装置还包括:数据流获取模块,用于在所述摄像头模组采集图像的情况下,获取所述DVS模组在触发事件中生成的数据流;其中,所述触发事件为采集图像中的拍摄主体在移动状态下产生的触发事件;速度值获取模块,用于根据获取的所述数据流,获得所述拍摄主体的移动速度值;快门时间获取模块,用于根据所述移动速度值,获得最大快门时间;第一输入接收模块,用于接收用户的第一输入;第一输入响应模块,用于响应于所述第一输入,根据采集图像的画面亮度,生成目标快门时间;第一曝光模块,用于在所述最大快门时间大于或者等于所述目标快门时间的情况下,基于所述目标快门时间,对目标区域进行曝光;第二曝光模块,用于在所述最大快门时间小于所述目标快门时间的情况下,基于所述最大快门时间,对目标区域进行曝光。
第三方面,本申请实施例提供了一种电子设备,该电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。
第四方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
第五方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第一方面所述的方法。
在本申请的实施例中,在设置常规摄像头模组的基础上,增加了DVS模组,且DVS模组的视场角覆盖常规摄像头模组的视场角。这样,在常规摄像头模组采集图像进行预览的情况下,DVS模组同步开始工作。基于DVS模组的工作原理,当预览中的拍摄主体移动时,DVS模组不停地触发事件,生成对应的数据流,从而可根据数据流,获取拍摄主体在任意时间的移动速度值,进而基于得到的移动速度值,可以得到在此移动状态下,不出现画面拖影的最大快门时间。进一步地,用户通过第一输入输出图像时,可基于当前的环境亮度,计算得到曝光参数,其中包括目标快门时间,再将得到的目标快门时间与最大快门时间进行比较,若目标快门时间没有超过最大快门时间,则以目标快门时间对预览图像中的目标区域进行曝光;若目标快门时间超过最大快门时间,则以最大快门时间对预览图像中的目标区域进行曝光。可见,在本申请实施例中,提供一种辅助拍摄方案,常规摄像头模组拍摄的同时,加入DVS模组对拍摄主体的移动数据判断,从而在动态拍摄场景中,增加拍摄的曝光参数准确性,避免因快门时间过长出现画面拖影现象,提高成片率。
附图说明
图1是本申请实施例的拍摄方法的流程图;
图2是本申请实施例的DVS模组的电路图;
图3是本申请实施例的DVS模组的信号输出图;
图4是本申请实施例的DVS模组的框图;
图5是本申请实施例的拍摄装置的平面示意图;
图6是本申请实施例的拍摄装置的部分结构示意图;
图7是本申请实施例的拍摄方法的示意图;
图8是本申请实施例的拍摄装置的框图;
图9是本申请实施例的电子设备的硬件结构示意图之一。
图10是本申请实施例的电子设备的硬件结构示意图之二。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的拍摄方法进行详细地说明。
图1示出了本申请一个实施例的拍摄方法的流程图,应用于拍摄装置,拍摄装置包括摄像头模组和动态视觉传感器(Dynamic Vision Sensors,简称DVS) 模组。方法包括:
步骤S1:在摄像头模组采集图像的情况下,获取DVS模组在触发事件中生成的数据流。
本实施例应用于的拍摄装置,在包括常规的摄像头模组的同时,加入了 DVS模组,以在启动摄像头模组采集图像进行预览的同时,启动DVS模组进行工作。因采集的图像中,若拍摄主体为移动状态,则DVS模组不停地触发事件,生成对应的数据流,从而利用DVS模组中生成的数据流,可对拍摄主体的移动状态进行判断、分析等。
可见,本实施例在摄像头模组拍摄情况下,通过增加DVS模组,提供了一种辅助拍摄方案。
需要说明的是,DVS是以事件驱动型(event-driven)的光电传感器,DVS 中的每个像素独立感受光强变化,将光强变化超过阈值的像素认为是激活像素,然后及时将激活像素的行列位置、极性信息、时间戳等信息打包并编码输出。
DVS的工作原理如下:
参见图2,在DVS的系统框图中,包括对数转换单元、变化检测单元和比较器单元。其中,对数转换单元用于把像素中产生的光电电子对数转换为电压;变化检测单元用于对输出电压进行负反馈放大;比较器单元用于对输出变化值进行阈值判断。参见图3,在DVS信号输出图中,当光强变大超过阈值时输出“ON”信号,反之输出“OFF”信号。
参见图4,在DVS工作模块图中,生成事件的像素向列编码输出模块发出请求(CR),列编码输出模块接受请求发出确认信号(ACK),并将相应像素的极性信息输入行编码模块,行编码模块可以生成行地址信息,以及时间戳生成器生成时间戳;行编码模块控制生成复位(reset)信号;输出缓冲器针对地址信息、极性信息、时间戳生成完整事件信息。
基于上述工作原理,在现实生活中拍摄,摄像头模组的预览帧率为30每秒帧数(frame per second,简称fps),即每两帧之间的时间为33ms。而DVS 响应的像素数量只为常规摄像头的5%左右,因此可以做到:等效帧率可达到 10000fps,甚至更高,可以记录细微的运动姿态;事件冗余度低,用于运算处理的数据量小,对处理需求的算力小。
因此,本实施例利用DVS的工作原理,将DVS模组加入拍摄装置中,以在摄像头采集图像时,若图像中的拍摄主体移动,可在DVS模组中产生触发事件,从而得知拍摄主体移动这一现象,再进一步做处理。
对应地,该步骤中的触发事件为:采集图像中的拍摄主体在移动状态下产生的触发事件。
其中,DVS模组的视场角覆盖镜头的视场角。
参见图5,在本实施例中,采用了双摄设计,包含了一个常规的摄像头模组1,以及采用DVS芯片的DVS模组2。参见图6,为了保证拍摄主体可被 DVS模组2准确记录,DVS模组2的视场角α2(field ofview,简称FOV)应覆盖摄像头模组1的视场角α1。其中,两个模组的FOV重合度越高越好,两个模组的距离应越近越好,最完美的状态是合二为一,这样,两个模组的像差越小,后期图像融合时的误差越小。
其中,视场角α1可为78°。
应用场景如:开启拍摄模式后,摄像头模组采集图像,拍摄装置显示预览画面,同时,DVS模组也开始工作。当拍摄主体在预览过程中进行移动时, DVS模组上会不停地触发事件,生成对应的数据流。
步骤S2:根据获取的数据流,获得拍摄主体的移动速度值。
在该步骤中,基于拍摄主体的移动,在DVS模组上不停地触发事件,生成对应的数据流,因此,生成的数据流可体现出拍摄主体的移动状态,从而在该步骤中,根据获取的数据流,获得拍摄主体的移动速度值。
步骤S3:根据移动速度值,获得最大快门时间。
在该步骤中,基于DVS模组记录的拍摄主体的移动速度值,从而可以得到拍摄主体基于此速度值移动时,为保证拍摄画面不会产生拖影,需曝光的最大快门时间,进而避免默认的快门时间过长。
步骤S4:接收用户的第一输入。
第一输入用于拍摄图片、拍摄视频。
第一输入的实现形式不限于触摸动作、隔空动作等;不限于手势动作、面部动作等;不限于一个动作、多个动作。而且,当第一输入包括多个动作时,多个动作可以是连续的,还可以是间断的。
应用场景如,用户点击拍摄按键。
步骤S5:响应于第一输入,根据采集图像的画面亮度,生成目标快门时间。
根据用户点击拍摄按键时,拍摄预览界面中的图像的画面亮度,生成目标快门时间,作为曝光参数的一部分。
步骤S6:在最大快门时间大于或者等于目标快门时间的情况下,基于目标快门时间,对目标区域进行曝光。
可选地,在步骤S6之前,增加比较最大快门时间和目标快门时间的步骤。
在该步骤中,若最大快门时间大于或者等于目标快门时间,则目标快门时间不会造成画面拖影,则将目标快门时间作为曝光参数,对目标区域进行曝光。
可选地,目标区域包括拍摄主体。
步骤S7:在最大快门时间小于目标快门时间的情况下,基于最大快门时间,对目标区域进行曝光。
在该步骤中,若最大快门时间小于目标快门时间,则目标快门时间太长,会造成画面拖影,则将最大快门时间作为曝光参数,对目标区域进行曝光。
可选地,目标区域包括拍摄主体。
在本申请的实施例中,在设置常规摄像头模组的基础上,增加了DVS模组,且DVS模组的视场角覆盖常规摄像头模组的视场角。这样,在常规摄像头模组采集图像进行预览的情况下,DVS模组同步开始工作。基于DVS模组的工作原理,当预览中的拍摄主体移动时,DVS模组不停地触发事件,生成对应的数据流,从而可根据数据流,获取拍摄主体在任意时间的移动速度值,进而基于得到的移动速度值,可以得到在此移动状态下,不出现画面拖影的最大快门时间。进一步地,用户通过第一输入输出图像时,可基于当前的环境亮度,计算得到曝光参数,其中包括目标快门时间,再将得到的目标快门时间与最大快门时间进行比较,若目标快门时间没有超过最大快门时间,则以目标快门时间对预览图像中的目标区域进行曝光;若目标快门时间超过最大快门时间,则以最大快门时间对预览图像中的目标区域进行曝光。可见,在本申请实施例中,提供一种辅助拍摄方案,常规摄像头模组拍摄的同时,加入DVS模组对拍摄主体的移动数据判断,从而在动态拍摄场景中,增加拍摄的曝光参数准确性,避免因快门时间过长出现画面拖影现象,提高成片率。
在图1所示实施例的基础上,本申请另一个实施例的拍摄方法的流程中,步骤S1包括:
步骤S11:分别获取DVS模组在任意两个时刻的触发事件中生成的第一数据和第二数据。
任意两个时刻优选为两个相邻的时刻,两个相邻的时刻分别对应两次相邻的触发事件。
DVS模组中,两次相邻的触发事件之间的间隔时长大于或者等于10ns。
两个时刻之间的时间间隔越小,得到的拍摄主体的速度精度就越高。
对应地,步骤S2包括:
步骤S21:根据第一数据和第二数据,获得拍摄主体在任意两个时刻之间的平均速度值。
在该步骤中,可获取任意两个时刻之间的平均速度值,作为拍摄主体的移动速度值。
其中,因两个时刻之间的时间间隔其实是很小的,得到的平均速度值可以看作是瞬时速度值。从而,基于本申请中的DVS模组,可实时获取拍摄主体的移动速度值,并实时获取与当前移动速度值对应的最大快门时间,进而用户在任意时刻输出图像时,可基于上一帧图像得到的最大快门时间,与当前图像得到的目标快门时间进行比较。
本申请另一个实施例的拍摄方法中,第一数据和第二数据均包括事件触发时对应像素的坐标信息。
步骤S21包括:
步骤S211:获取DVS模组的第一像素尺寸信息。
步骤S212:根据第一像素尺寸信息和坐标信息,获得拍摄主体在任意两个时刻之间的平均速度值。
在本实施例中,参见图7,在t1时刻,基于拍摄主体的移动在DVS模组产生的第一数据包括:(x1,y1,p1,t1);在t2时刻,基于拍摄主体的移动在DVS模组产生的第二数据包括:(x2,y2,p2,t2)。其中,对(x,y,p, t)的数据说明如下:
x:事件触发时对应像素的横坐标值;
y:事件触发时对应像素的纵坐标值;
p:事件触发时亮度的变化值(变亮为1,变暗为0);
t:事件触发的时间戳。
在公式一中,t1早于t2;d1为DVS模组的像素尺寸,第一像素尺寸信息包括d1。
在本实施例中,可获取任意两个时刻,DVS模组中的两组数据,从而根据这两组数据,得到这两个时刻对应的时长内,拍摄主体的平均速度值。
需要说明的是,可由单点运动的场景得到的数据,扩展到矩阵数据,其中的计算原理也如上述公式一所述,从而得到拍摄主体整体的平均速度值。
在本申请另一个实施例的拍摄方法的流程中,步骤S3包括:
步骤S31:获取摄像头模组的第二像素尺寸信息。
步骤S32:根据第二像素尺寸信息和平均速度值,获得最大快门时间。
在公式二中,d2为摄像头模组的像素尺寸,第二像素尺寸信息包括d2。
在本实施例中,可通过公式二得到,保证拍摄主体不产生拖影的最大快门时间。
在本申请另一个实施例的拍摄方法的流程中,在步骤S4之后,还包括:
步骤S8:响应于第一输入,根据采集图像的画面亮度,获得第一目标感光度。
在拍摄过程中,为了得到足够亮的图像,具有自动曝光的算法。
在该步骤中,自动曝光的算法通过当前画面的亮度,自动生成曝光参数,曝光参数包括目标快门时间和第一目标感光度。
当对焦区域的画面亮度一样时,拍照使用的快门时间不会发生变化。
对应地,步骤S6包括:
步骤S61:在最大快门时间大于或者等于目标快门时间的情况下,基于目标快门时间和第一目标感光度,对目标区域进行曝光。
在最大快门时间大于或者等于目标快门时间的情况下,直接使用目标快门时间和第一目标感光度,对目标区域进行曝光。
可选地,目标区域为对焦区域。
在本实施例中,在得到的目标快门时间不超过最大快门时间的情况下,可直接利用目标快门时间,以及计算得到的对应的第一目标感光度,对目标区域进行曝光,以提高拍摄效果。
在本申请另一个实施例的拍摄方法的流程中,步骤S7包括:
步骤S71:在最大快门时间小于目标快门时间的情况下,基于最大快门时间,获得与最大快门时间对应的第二目标感光度。
在本实施例中,在得到的目标快门时间超过最大快门时间的情况下,利用自动曝光算法得到最大快门时间对应的感光度,即第二目标感光度。
步骤S72:基于最大快门时间和第二目标感光度,对目标区域进行曝光。
可选地,在用户通过第一输入输出图像时,可基于当前图像的画面亮度,利用自动曝光算法,得到目标快门时间和第一目标感光度。进一步地,在最大快门时间小于目标快门时间的情况下,再利用自动曝光算法,得到与最大快门时间对应的第二目标感光度,从而在步骤中,使用最大快门时间和第二目标感光度,对目标区域进行曝光。
可选地,目标区域为对焦区域。
将最大快门时间,以及计算得到的对应的第二目标感光度,作为曝光参数,对目标区域进行曝光,以提高拍摄效果,同时避免出现拖影现象。
综上,第一方面,本申请使用DVS模组与常规的摄像头模组融合,因为 DVS模组的等效帧率极高,可以精确计算出曝光开始前一瞬间拍摄主体的移动速度值,从而更准确生成对应的曝光参数,提高成片率,特别是暗光下的成片率。第二方面,因为DVS的冗余数据少,生成曝光参数所需的算力需求小,计算速度更快,并可以节省拍摄过程中的功耗,提高拍摄装置的续航。第三方面,DVS模组不需要在像素表面覆盖用于截取部分波段的滤波片阵列,可以拓宽吸收频谱,暗光下依然可以准确记录物体状态,提高暗光下拍照成片率。
本申请中的拍摄方法可用于任意需要使用自动曝光的硬件设备。
图8示出了本申请另一个实施例的拍摄装置的框图,包括摄像头模组,拍摄装置还包括DVS模组,DVS模组的视场角覆盖摄像头模组的视场角;拍摄装置还包括:
数据流获取模块10,用于在摄像头模组采集图像的情况下,获取DVS模组在触发事件中生成的数据流;其中,触发事件为采集图像中的拍摄主体在移动状态下产生的触发事件;
速度值获取模块20,用于根据获取的数据流,获得拍摄主体的移动速度值;
快门时间获取模块30,用于根据移动速度值,获得最大快门时间;
第一输入接收模块40,用于接收用户的第一输入;
第一输入响应模块50,用于响应于第一输入,根据采集图像的画面亮度,生成目标快门时间;
第一曝光模块60,用于在最大快门时间大于或者等于目标快门时间的情况下,基于目标快门时间,对目标区域进行曝光;
第二曝光模块70,用于在最大快门时间小于目标快门时间的情况下,基于最大快门时间,对目标区域进行曝光。
在本申请的实施例中,在设置常规摄像头模组的基础上,增加了DVS模组,且DVS模组的视场角覆盖常规摄像头模组的视场角。这样,在常规摄像头模组采集图像进行预览的情况下,DVS模组同步开始工作。基于DVS模组的工作原理,当预览中的拍摄主体移动时,DVS模组不停地触发事件,生成对应的数据流,从而可根据数据流,获取拍摄主体在任意时间的移动速度值,进而基于得到的移动速度值,可以得到在此移动状态下,不出现画面拖影的最大快门时间。进一步地,用户通过第一输入输出图像时,可基于当前的环境亮度,计算得到曝光参数,其中包括目标快门时间,再将得到的目标快门时间与最大快门时间进行比较,若目标快门时间没有超过最大快门时间,则以目标快门时间对预览图像中的目标区域进行曝光;若目标快门时间超过最大快门时间,则以最大快门时间对预览图像中的目标区域进行曝光。可见,在本申请实施例中,提供一种辅助拍摄方案,常规摄像头模组拍摄的同时,加入DVS模组对拍摄主体的移动数据判断,从而在动态拍摄场景中,增加拍摄的曝光参数准确性,避免因快门时间过长出现画面拖影现象,提高成片率。
可选地,数据流获取模块10包括:
数据获取单元,用于分别获取DVS模组在任意两个时刻的触发事件中生成的第一数据和第二数据;
速度值获取模块20包括:
平均速度获取单元,用于根据第一数据和第二数据,获得拍摄主体在任意两个时刻之间的平均速度值。
可选地,第一数据和第二数据均包括事件触发时对应像素的坐标信息;
平均速度获取单元包括:
第一尺寸获取子单元,用于获取DVS模组的第一像素尺寸信息;
速度计算子单元,用于根据第一像素尺寸信息和坐标信息,获得拍摄主体在任意两个时刻之间的平均速度值。
可选地,快门时间获取模块30包括:
第一尺寸获取单元,用于获取摄像头模组的第二像素尺寸信息;
快门时间计算单元,用于根据第二像素尺寸信息和平均速度值,获得最大快门时间。
可选地,还包括:
第一感光度获取模块,用于响应于第一输入,根据采集图像的画面亮度,获得第一目标感光度;
第一曝光模块60,包括:
第一执行单元,用于在最大快门时间大于或者等于目标快门时间的情况下,基于目标快门时间和第一目标感光度,对目标区域进行曝光。
可选地,第二曝光模块70,包括:
第二感光度获取单元,用于在最大快门时间小于目标快门时间的情况下,基于最大快门时间,获得与最大快门时间对应的第二目标感光度;
第二执行单元,用于基于最大快门时间和第二目标感光度,对目标区域进行曝光。
本申请实施例中的拍摄装置可以是装置,也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备,也可以为非移动电子设备。示例性的,移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer, UMPC)、上网本或者个人数字助理(personaldigital assistant,PDA)等,非移动电子设备可以为服务器、网络附属存储器(NetworkAttached Storage, NAS)、个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的拍摄装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为ios操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
本申请实施例提供的拍摄装置能够实现图1至图7的方法实施例实现的各个过程,为避免重复,这里不再赘述。
可选的,如图9所示,本申请实施例还提供一种电子设备100,包括处理器101,存储器102,存储在存储器102上并可在所述处理器101上运行的程序或指令,该程序或指令被处理器101执行时实现上述拍摄方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图10为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备1000包括但不限于:射频单元1001、网络模块1002、音频输出单元1003、输入单元1004、传感器1005、显示单元1006、用户输入单元 1007、接口单元1008、存储器1009、以及处理器1010等部件。
本领域技术人员可以理解,电子设备1000还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器1010逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图10中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,电子设备还包括摄像头模组1011、DVS模组1012,DVS模组1012 的视场角覆盖镜头1011的镜头1011的视场角;
用户输入单元1007,用于接收用户的第一输入;
处理器1010,用于在所述摄像头模组采集图像的情况下,获取所述DVS 模组在触发事件中生成的数据流;其中,所述触发事件为采集图像中的拍摄主体在移动状态下产生的触发事件;根据获取的所述数据流,获得所述拍摄主体的移动速度值;根据所述移动速度值,获得最大快门时间;响应于所述第一输入,根据采集图像的画面亮度,生成目标快门时间;在所述最大快门时间大于或者等于所述目标快门时间的情况下,基于所述目标快门时间,对目标区域进行曝光;在所述最大快门时间小于所述目标快门时间的情况下,基于所述最大快门时间,对目标区域进行曝光。
在本申请的实施例中,在设置常规摄像头模组的基础上,增加了DVS模组,且DVS模组的视场角覆盖常规摄像头模组的视场角。这样,在常规摄像头模组采集图像进行预览的情况下,DVS模组同步开始工作。基于DVS模组的工作原理,当预览中的拍摄主体移动时,DVS模组不停地触发事件,生成对应的数据流,从而可根据数据流,获取拍摄主体在任意时间的移动速度值,进而基于得到的移动速度值,可以得到在此移动状态下,不出现画面拖影的最大快门时间。进一步地,用户通过第一输入输出图像时,可基于当前的环境亮度,计算得到曝光参数,其中包括目标快门时间,再将得到的目标快门时间与最大快门时间进行比较,若目标快门时间没有超过最大快门时间,则以目标快门时间对预览图像中的目标区域进行曝光;若目标快门时间超过最大快门时间,则以最大快门时间对预览图像中的目标区域进行曝光。可见,在本申请实施例中,提供一种辅助拍摄方案,常规摄像头模组拍摄的同时,加入DVS模组对拍摄主体的移动数据判断,从而在动态拍摄场景中,增加拍摄的曝光参数准确性,避免因快门时间过长出现画面拖影现象,提高成片率。
可选地,处理器1010,还用于分别获取DVS模组在任意两个时刻的触发事件中生成的第一数据和第二数据;根据第一数据和第二数据,获得拍摄主体在任意两个时刻之间的平均速度值。
可选地,第一数据和第二数据均包括事件触发时对应像素的坐标信息;
处理器1010,还用于获取DVS模组的第一像素尺寸信息;根据第一像素尺寸信息和坐标信息,获得拍摄主体在任意两个时刻之间的平均速度值。
可选地,处理器1010,还用于获取摄像头模组的第二像素尺寸信息;根据第二像素尺寸信息和平均速度值,获得最大快门时间。
可选地,处理器1010,还用于响应于第一输入,根据采集图像的画面亮度,获得第一目标感光度;在最大快门时间大于或者等于目标快门时间的情况下,基于目标快门时间和第一目标感光度,对目标区域进行曝光。
可选地,处理器1010,还用于在最大快门时间小于目标快门时间的情况下,基于最大快门时间,获得与最大快门时间对应的第二目标感光度;基于最大快门时间和第二目标感光度,对目标区域进行曝光。
第一方面,本申请使用DVS模组与常规的摄像头模组融合,因为DVS模组的等效帧率极高,可以精确计算出曝光开始前一瞬间拍摄主体的移动速度值,从而更准确生成对应的曝光参数,提高成片率,特别是暗光下的成片率。第二方面,因为DVS的冗余数据少,生成曝光参数所需的算力需求小,计算速度更快,并可以节省拍摄过程中的功耗,提高拍摄装置的续航。第三方面, DVS模组不需要在像素表面覆盖用于截取部分波段的滤波片阵列,可以拓宽吸收频谱,暗光下依然可以准确记录物体状态,提高暗光下拍照成片率。
应理解的是,本申请实施例中,输入单元1004可以包括图形处理器 (GraphicsProcessing Unit,GPU)10041和麦克风10042,图形处理器10041 对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元1006可包括显示面板10061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板10061。用户输入单元1007包括触控面板10071以及其他输入设备10072。触控面板10071,也称为触摸屏。触控面板10071可包括触摸检测装置和触摸控制器两个部分。其他输入设备10072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。存储器1009可用于存储软件程序以及各种数据,包括但不限于应用程序和操作系统。处理器1010 可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器1010中。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述拍摄方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等。
本申请实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述拍摄方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
Claims (10)
1.一种拍摄方法,应用于拍摄装置,所述拍摄装置包括摄像头模组,其特征在于,所述拍摄装置还包括DVS模组,所述DVS模组的视场角覆盖所述摄像头模组的视场角;所述方法包括:
在所述摄像头模组采集图像的情况下,获取所述DVS模组在触发事件中生成的数据流;其中,所述触发事件为采集图像中的拍摄主体在移动状态下产生的触发事件;
根据获取的所述数据流,获得所述拍摄主体的移动速度值;
根据所述移动速度值,获得最大快门时间;
接收用户的第一输入;
响应于所述第一输入,根据采集图像的画面亮度,生成目标快门时间;
在所述最大快门时间大于或者等于所述目标快门时间的情况下,基于所述目标快门时间,对目标区域进行曝光;
在所述最大快门时间小于所述目标快门时间的情况下,基于所述最大快门时间,对目标区域进行曝光。
2.根据权利要求1所述的方法,其特征在于,所述获取所述DVS模组在触发事件中生成的数据流,包括:
分别获取所述DVS模组在任意两个时刻的触发事件中生成的第一数据和第二数据;
所述根据获取的所述数据流,获得所述拍摄主体的移动速度值,包括:
根据所述第一数据和所述第二数据,获得所述拍摄主体在所述任意两个时刻之间的平均速度值。
3.根据权利要求2所述的方法,其特征在于,所述第一数据和所述第二数据均包括事件触发时对应像素的坐标信息;
所述根据所述第一数据和所述第二数据,获得所述拍摄主体在所述任意两个时刻之间的平均速度值,包括:
获取所述DVS模组的第一像素尺寸信息;
根据所述第一像素尺寸信息和所述坐标信息,获得所述拍摄主体在所述任意两个时刻之间的平均速度值。
4.根据权利要求2所述的方法,其特征在于,所述根据所述移动速度值,获得最大快门时间,包括:
获取所述摄像头模组的第二像素尺寸信息;
根据所述第二像素尺寸信息和所述平均速度值,获得最大快门时间。
5.根据权利要求1所述的方法,其特征在于,所述接收用户的第一输入之后,还包括:
响应于所述第一输入,根据采集图像的画面亮度,获得第一目标感光度;
所述在所述最大快门时间大于或者等于所述目标快门时间的情况下,基于所述目标快门时间,对目标区域进行曝光,包括:
在所述最大快门时间大于或者等于所述目标快门时间的情况下,基于所述目标快门时间和所述第一目标感光度,对目标区域进行曝光。
6.根据权利要求1所述的方法,其特征在于,所述在所述最大快门时间小于所述目标快门时间的情况下,基于所述最大快门时间,对目标区域进行曝光,包括:
在所述最大快门时间小于所述目标快门时间的情况下,基于所述最大快门时间,获得与所述最大快门时间对应的第二目标感光度;
基于所述最大快门时间和所述第二目标感光度,对目标区域进行曝光。
7.一种拍摄装置,包括摄像头模组,其特征在于,所述拍摄装置还包括DVS模组,所述DVS模组的视场角覆盖所述摄像头模组的视场角;所述拍摄装置还包括:
数据流获取模块,用于在所述摄像头模组采集图像的情况下,获取所述DVS模组在触发事件中生成的数据流;其中,所述触发事件为采集图像中的拍摄主体在移动状态下产生的触发事件;
速度值获取模块,用于根据获取的所述数据流,获得所述拍摄主体的移动速度值;
快门时间获取模块,用于根据所述移动速度值,获得最大快门时间;
第一输入接收模块,用于接收用户的第一输入;
第一输入响应模块,用于响应于所述第一输入,根据采集图像的画面亮度,生成目标快门时间;
第一曝光模块,用于在所述最大快门时间大于或者等于所述目标快门时间的情况下,基于所述目标快门时间,对目标区域进行曝光;
第二曝光模块,用于在所述最大快门时间小于所述目标快门时间的情况下,基于所述最大快门时间,对目标区域进行曝光。
8.根据权利要求7所述的装置,其特征在于,所述数据流获取模块包括:
数据获取单元,用于分别获取所述DVS模组在任意两个时刻的触发事件中生成的第一数据和第二数据;
所述速度值获取模块包括:
平均速度获取单元,用于根据所述第一数据和所述第二数据,获得所述拍摄主体在所述任意两个时刻之间的平均速度值。
9.一种电子设备,其特征在于,包括处理器,存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求1-6任一项所述的拍摄方法的步骤。
10.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求1-6任一项所述的拍摄方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011035200.2A CN112153301B (zh) | 2020-09-27 | 2020-09-27 | 拍摄方法和电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011035200.2A CN112153301B (zh) | 2020-09-27 | 2020-09-27 | 拍摄方法和电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112153301A CN112153301A (zh) | 2020-12-29 |
CN112153301B true CN112153301B (zh) | 2021-07-27 |
Family
ID=73894581
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011035200.2A Active CN112153301B (zh) | 2020-09-27 | 2020-09-27 | 拍摄方法和电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112153301B (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112770056B (zh) * | 2021-01-20 | 2022-06-24 | 维沃移动通信(杭州)有限公司 | 拍摄方法、拍摄装置和电子设备 |
CN113422902B (zh) * | 2021-05-31 | 2023-01-06 | 惠州华阳通用电子有限公司 | 一种摄像头帧率调节方法 |
CN113923367B (zh) * | 2021-11-24 | 2024-04-12 | 维沃移动通信有限公司 | 拍摄方法、拍摄装置 |
CN114390209A (zh) * | 2022-02-23 | 2022-04-22 | 维沃移动通信有限公司 | 拍摄方法、拍摄装置、电子设备和可读存储介质 |
CN117425064A (zh) * | 2022-07-06 | 2024-01-19 | 华为技术有限公司 | 帧率调节方法、装置、设备及系统 |
CN116528052A (zh) * | 2023-04-14 | 2023-08-01 | 北京拙河科技有限公司 | 一种增加高速运动下光场相机曝光精度的方法及装置 |
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104980664A (zh) * | 2014-04-03 | 2015-10-14 | 佳能株式会社 | 图像处理装置及其控制方法以及摄像装置 |
CN105898143A (zh) * | 2016-04-27 | 2016-08-24 | 维沃移动通信有限公司 | 一种运动物体的抓拍方法及移动终端 |
CN107018357A (zh) * | 2016-01-27 | 2017-08-04 | 三星电子株式会社 | 关于图像形成的动态视觉传感器的事件采样的方法和设备 |
CN107820024A (zh) * | 2017-12-05 | 2018-03-20 | 北京小米移动软件有限公司 | 图像拍摄方法、装置及存储介质 |
CN108073857A (zh) * | 2016-11-14 | 2018-05-25 | 北京三星通信技术研究有限公司 | 动态视觉传感器dvs事件处理的方法及装置 |
CN109544590A (zh) * | 2018-11-27 | 2019-03-29 | 上海芯仑光电科技有限公司 | 一种目标跟踪方法及计算设备 |
CN109743506A (zh) * | 2018-12-14 | 2019-05-10 | 维沃移动通信有限公司 | 一种图像拍摄方法及终端设备 |
CN110177200A (zh) * | 2019-06-28 | 2019-08-27 | Oppo广东移动通信有限公司 | 摄像头模组、电子设备以及影像拍摄方法 |
CN110536078A (zh) * | 2018-05-23 | 2019-12-03 | 三星电子株式会社 | 处理动态视觉传感器的数据的方法和动态视觉传感器 |
CN110868550A (zh) * | 2019-11-25 | 2020-03-06 | 维沃移动通信(杭州)有限公司 | 一种拍照方法及终端设备电子设备 |
CN111200708A (zh) * | 2020-01-15 | 2020-05-26 | 上海摩象网络科技有限公司 | 长曝光拍摄控制方法、系统、设备及计算机存储介质 |
CN111601040A (zh) * | 2020-05-29 | 2020-08-28 | 维沃移动通信(杭州)有限公司 | 摄像头控制方法、装置及电子设备 |
CN111601032A (zh) * | 2020-04-27 | 2020-08-28 | 维沃移动通信(杭州)有限公司 | 一种拍摄方法、装置及电子设备 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9986179B2 (en) * | 2014-09-30 | 2018-05-29 | Qualcomm Incorporated | Sensor architecture using frame-based and event-based hybrid scheme |
US10447920B2 (en) * | 2017-07-05 | 2019-10-15 | Intel Corporation | Micro-saccadic actuation for an event camera |
-
2020
- 2020-09-27 CN CN202011035200.2A patent/CN112153301B/zh active Active
Patent Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104980664A (zh) * | 2014-04-03 | 2015-10-14 | 佳能株式会社 | 图像处理装置及其控制方法以及摄像装置 |
CN107018357A (zh) * | 2016-01-27 | 2017-08-04 | 三星电子株式会社 | 关于图像形成的动态视觉传感器的事件采样的方法和设备 |
CN105898143A (zh) * | 2016-04-27 | 2016-08-24 | 维沃移动通信有限公司 | 一种运动物体的抓拍方法及移动终端 |
CN108073857A (zh) * | 2016-11-14 | 2018-05-25 | 北京三星通信技术研究有限公司 | 动态视觉传感器dvs事件处理的方法及装置 |
CN107820024A (zh) * | 2017-12-05 | 2018-03-20 | 北京小米移动软件有限公司 | 图像拍摄方法、装置及存储介质 |
CN110536078A (zh) * | 2018-05-23 | 2019-12-03 | 三星电子株式会社 | 处理动态视觉传感器的数据的方法和动态视觉传感器 |
CN109544590A (zh) * | 2018-11-27 | 2019-03-29 | 上海芯仑光电科技有限公司 | 一种目标跟踪方法及计算设备 |
CN109743506A (zh) * | 2018-12-14 | 2019-05-10 | 维沃移动通信有限公司 | 一种图像拍摄方法及终端设备 |
CN110177200A (zh) * | 2019-06-28 | 2019-08-27 | Oppo广东移动通信有限公司 | 摄像头模组、电子设备以及影像拍摄方法 |
CN110868550A (zh) * | 2019-11-25 | 2020-03-06 | 维沃移动通信(杭州)有限公司 | 一种拍照方法及终端设备电子设备 |
CN111200708A (zh) * | 2020-01-15 | 2020-05-26 | 上海摩象网络科技有限公司 | 长曝光拍摄控制方法、系统、设备及计算机存储介质 |
CN111601032A (zh) * | 2020-04-27 | 2020-08-28 | 维沃移动通信(杭州)有限公司 | 一种拍摄方法、装置及电子设备 |
CN111601040A (zh) * | 2020-05-29 | 2020-08-28 | 维沃移动通信(杭州)有限公司 | 摄像头控制方法、装置及电子设备 |
Non-Patent Citations (1)
Title |
---|
Gradient-Based Auto-Exposure Control Applied to a Self-Driving Car;Ishaan Mehta et al;《2020 17th Conference on Computer and Robot Vision (CRV)》;20200515;第166-173页 * |
Also Published As
Publication number | Publication date |
---|---|
CN112153301A (zh) | 2020-12-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112153301B (zh) | 拍摄方法和电子设备 | |
EP3633975B1 (en) | Photographic method, photographic apparatus, and mobile terminal | |
EP3686845B1 (en) | Image processing method and device and apparatus | |
CN112312017B (zh) | 拍摄控制方法和电子设备 | |
CN111601040B (zh) | 摄像头控制方法、装置及电子设备 | |
CN112637500B (zh) | 图像处理方法及装置 | |
CN112822412A (zh) | 曝光方法和电子设备 | |
CN112333382B (zh) | 拍摄方法、装置及电子设备 | |
CN113099122A (zh) | 拍摄方法、装置、设备和存储介质 | |
CN112954212B (zh) | 视频生成方法、装置及设备 | |
CN113596294A (zh) | 拍摄方法、装置和电子设备 | |
CN112422798A (zh) | 拍照方法、装置、电子设备和存储介质 | |
CN113709368A (zh) | 图像显示方法、装置及设备 | |
CN112153291B (zh) | 拍照方法和电子设备 | |
CN114286011B (zh) | 对焦方法和装置 | |
CN114125226A (zh) | 图像拍摄方法、装置、电子设备和可读存储介质 | |
CN112291474A (zh) | 图像获取方法、装置及电子设备 | |
CN112399092A (zh) | 拍摄方法、装置和电子设备 | |
CN114339051A (zh) | 拍摄方法、装置、电子设备和可读存储介质 | |
CN112367464A (zh) | 图像输出方法、装置及电子设备 | |
CN112653841A (zh) | 拍摄方法、装置和电子设备 | |
CN113037996A (zh) | 图像处理方法、装置和电子设备 | |
CN112312024A (zh) | 拍照处理方法、装置及存储介质 | |
CN111381668B (zh) | 一种基于手指轻扫动作捕捉的拍摄方法 | |
CN112492216B (zh) | 拍摄控制方法和拍摄控制装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |