CN108540725A - 防抖方法、电子装置、成像系统、存储介质和计算机设备 - Google Patents

防抖方法、电子装置、成像系统、存储介质和计算机设备 Download PDF

Info

Publication number
CN108540725A
CN108540725A CN201810458219.4A CN201810458219A CN108540725A CN 108540725 A CN108540725 A CN 108540725A CN 201810458219 A CN201810458219 A CN 201810458219A CN 108540725 A CN108540725 A CN 108540725A
Authority
CN
China
Prior art keywords
movable information
imaging modules
image
motion
imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810458219.4A
Other languages
English (en)
Inventor
张弓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201810458219.4A priority Critical patent/CN108540725A/zh
Publication of CN108540725A publication Critical patent/CN108540725A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6812Motion detection based on additional sensors, e.g. acceleration sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • H04N23/684Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time
    • H04N23/6845Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time by combination of a plurality of images sequentially taken

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)

Abstract

本发明公开一种防抖方法,用于成像系统。成像系统包括成像模组和第一运动传感器,所述成像模组和所述第一运动传感器进行通信,所述第一运动传感器用于设置在被摄物上,防抖方法包括:获取所述第一运动传感器检测的所述被摄物的运动信息;和根据所述被摄物的运动信息对所述成像模组拍摄的图像进行运动补偿。本发明还公开电子装置、成像系统、非易失性计算机可读存储介质和计算机设备。本发明的防抖方法、电子装置、成像系统、非易失性计算机可读存储介质和计算机设备获取被摄物的运动信息,从而可以根据被摄物的运动信息对成像模组拍摄的图像进行运动补偿,使得被摄物在成像模组拍摄的图像中更加清晰。

Description

防抖方法、电子装置、成像系统、存储介质和计算机设备
技术领域
本发明涉及成像技术领域,特别涉及一种防抖方法、电子装置、成像系统、非易失性计算机可读存储介质和计算机设备。
背景技术
在相关技术中,为了提高成像质量,一般在成像模组中设置运动传感器以利用运动传感器进行防抖,例如通过运动传感器来感应成像模组在拍摄时的运动信息(比如移动或抖动等),再根据成像模组的运动信息通过光学防抖马达控制成像模组的镜头和/或图像传感器进行相应的位移以进行补偿,从而改善成像模组的运动使得图像模糊的问题。然而,这种防抖方法在某些场合无法对图像进行补偿。
发明内容
本发明的实施例提供了一种防抖方法、电子装置、成像系统、非易失性计算机可读存储介质和计算机设备。
本发明实施方式的防抖方法,用于成像系统,所述成像系统包括成像模组和第一运动传感器,所述成像模组和所述第一运动传感器进行通信,所述第一运动传感器用于设置在被摄物上,所述防抖方法包括:
获取所述第一运动传感器检测的所述被摄物的运动信息;和
根据所述被摄物的运动信息对所述成像模组拍摄的图像进行运动补偿。
本发明实施方式的电子装置,包括成像模组和处理器,所述处理器用于获取被摄物的运动信息、及根据所述被摄物的运动信息对所述成像模组拍摄的图像进行运动补偿。
本发明实施方式的成像系统,包括上述电子装置和与所述成像模组进行通信的第一运动传感器。
本发明实施方式的一个或多个包含计算机可执行指令的非易失性计算机可读存储介质,当所述计算机可执行指令被一个或多个处理器执行时,使得所述处理器执行上述防抖方法。
本发明实施方式的计算机设备,包括存储器及处理器,所述存储器中储存有计算机可读指令,所述指令被所述处理器执行时,使得所述处理器执行上述防抖方法。
本发明的防抖方法、电子装置、成像系统、非易失性计算机可读存储介质和计算机设备获取被摄物的运动信息,从而可以根据被摄物的运动信息对成像模组拍摄的图像进行运动补偿,使得被摄物在成像模组拍摄的图像中更加清晰。
本发明的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明某些实施方式的防抖方法的流程示意图。
图2是本发明某些实施方式的成像系统的示意图。
图3是本发明某些实施方式的电子装置的示意图。
图4至图6是本发明某些实施方式的防抖方法的流程示意图。
图7是本发明某些实施方式的电子装置的成像模组的示意图。
图8至图10是本发明某些实施方式的防抖方法的流程示意图。
图11是本发明某些实施方式的计算机设备的示意图。
图12是本发明某些实施方式的图像处理电路的示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
请参阅图1和图2,本发明实施方式的防抖方法可以用于成像系统1000。成像系统1000包括成像模组10和第一运动传感器200,成像模组10和第一运动传感器200进行通信,第一运动传感器200用于设置在被摄物上。防抖方法包括:
02:获取第一运动传感器200检测的被摄物的运动信息;和
04:根据被摄物的运动信息对成像模组10拍摄的图像进行运动补偿。
请参阅图3,本发明实施方式的电子装置100包括成像模组10和处理器20,处理器20用于获取被摄物的运动信息、及根据被摄物的运动信息对成像模组10拍摄的图像进行运动补偿。
也即是说,本发明实施方式的防抖方法可以由本发明实施方式的电子装置100实现,其中,步骤02和步骤04均可以由处理器20实现。
本发明实施方式的防抖方法和电子装置100获取被摄物的运动信息,从而可以根据被摄物的运动信息对成像模组10拍摄的图像进行运动补偿,使得被摄物在成像模组10拍摄的图像中更加清晰。
电子装置100可以是相机、手机、平板电脑、手提电脑、游戏机、头显设备、门禁系统、柜员机等,在此不作限制。
在某些实施方式中,获取被摄物的运动信息可以通过处理成像模组10获取的图像获得,如此被摄物的运动信息能够方便地获得。
请再次参阅图2,在某些实施方式中,成像模组10用于与设置在被摄物上的第一运动传感器200通信,获取被摄物的运动信息可以是获取第一运动传感器200检测的被摄物的运动信息。
本发明实施方式的成像系统1000包括电子装置100和与成像模组10进行通信的第一运动传感器200。
在某些实施方式中,第一运动传感器200可以为角速度传感器、角加速度传感器和加速度传感器中的至少一种。在一个实施例中,第一运动传感器200为角速度传感器,例如为陀螺仪,通过处理陀螺仪的测量被摄物的角速度可以获得被摄物的运动信息。
在某些实施方式中,成像模组10与第一运动传感器200进行通信,可以理解为,成像模组10和第一运动传感器200进行无线通信,或,成像模组10和第一运动传感器200进行有线通信。成像模组10和第一运动传感器200进行无线通信的方式可以为:WiFi通信、蓝牙通信或红外通信等。成像模组10和第一运动传感器200可以直接通信或间接通信,例如成像模组10包括通信模块,成像模组10通过通信模块可以直接与第一运动传感器200进行通信;又例如电子装置100包括通信模块,成像模组10与通信模块进行通信,通信模块与第一运动传感器200进行通信。
在某些实施方式中,第一运动传感器200直接设置在被摄物上,在其他实施方式中,第一运动传感器200可以收容在可携带物品上,可携带物品例如包括蓝牙耳机、智能眼镜或饰品(发带、项链)等,再将收容有第一运动传感器200的可携带物品设置在被摄物上。
由于被摄物的运动信息是通过第一运动传感器200检测获得的,因此被摄物的运动信息精准度较高,能够检测到被摄物的微小运动,从而实现更为准确的运动补偿。
请再次参阅图3,在某些实施方式中,电子装置100还包括壳体30,成像模组10安装在壳体30上并从壳体30暴露以拍摄图像。壳体30可以给成像模组10提供防尘、防水、防摔等保护,壳体30上开设有与成像模组10对应的孔,以使光线从孔中穿出或穿入壳体30。
在某些实施方式中,步骤02可以在成像模组10开启前执行。如此,可以快速地获取被摄物的运动信息。
具体地,在成像模组10开启前,获取第一运动传感器200检测到的被摄物的运动信息,在成像模组10开启后,即可以利用被摄物的运动信息对成像模组10拍摄的图像进行运动补偿,从而减少成像模组10开启后获取被摄物的运动信息所需的时间,实现更加快速、更加准确地运动补偿。
在某些实施方式中,被摄物的运动信息为一组,被摄物的一组运动信息可以通过第一运动传感器200一次检测获得,如此,能够快速地获取被摄物的运动信息。
请参阅图4,在某些实施方式中,被摄物的运动信息包括多组,步骤04包括:
0412:根据被摄物的多组运动信息计算被摄物的运动信息的平均值;和
0414:根据被摄物的运动信息的平均值对图像进行运动补偿。
请再次参阅图3,在某些实施方式中,被摄物的运动信息包括多组,处理器20用于根据被摄物的多组运动信息计算被摄物的运动信息的平均值、及根据被摄物的运动信息的平均值对图像进行运动补偿。
也即是说,步骤0412和步骤0414均可以由处理器20实现。
根据被摄物的运动信息的平均值对图像进行运动补偿,可以减少运动补偿的误差,使得运动补偿更加准确。
具体地,由于第一运动传感器200的工作过程、第一运动传感器200与成像模组10的通信过程等都可能存在一定的误差,因此导致获取的被摄物的运动信息可能不准确,根据不准确的被摄物的运动信息对图像进行运动补偿容易导致图像变得更加模糊。因此,可以根据被摄物的多组运动信息计算被摄物的运动信息的平均值,从而获得较为准确的被摄物的运动信息,再根据较为准确的被摄物的运动信息的平均值对图像进行运动补偿以得到清晰的图像。
请参阅图5,在某些实施方式中,被摄物的运动信息包括多组,被摄物的多组运动信息包括被摄物的当前运动信息,运动信息包括速度和方向,步骤04包括:
0416:根据被摄物的多组运动信息确定被摄物的速度和方向的变化趋势;
0418:根据变化趋势确定被摄物的当前运动信息是否准确;
0422:在被摄物的当前运动信息准确时根据被摄物的当前运动信息对图像进行运动补偿。
请再次参阅图3,在某些实施方式中,被摄物的运动信息包括多组,被摄物的多组运动信息包括被摄物的当前运动信息,运动信息包括速度和方向,处理器20用于根据被摄物的多组运动信息确定被摄物的速度和方向的变化趋势、根据变化趋势确定被摄物的当前运动信息是否准确、及在被摄物的当前运动信息准确时根据被摄物的当前运动信息对图像进行运动补偿。
也即是说,步骤0416、步骤0418和步骤0422均可以由处理器20实现。
根据准确的被摄物的当前运动信息对图像进行运动补偿,可以减少运动补偿的误差,使得运动补偿更加准确。
具体地,由于物体的运动过程是一个渐变的过程,因此根据被摄物的多组运动信息可以确定被摄物的速度和方向的变化趋势(其中,在速度不为0时,方向一般保持不变),根据变化趋势即可大致判断被摄物的当前运动信息是否准确,如此在被摄物的当前运动信息准确时可以根据准确的被摄物的当前运动信息对图像进行运动补偿;在被摄物的当前运动信息不准确时可以舍弃该运动信息。在一个实施例中,被摄物的多组运动信息按获取的时间分别为:(0.01m/s、向左)、(0.011m/s、向左)、(0.012m/s向左)、(0.5m/s、向左),其中最后一组(0.5m/s、向左)为被摄物的当前运动信息,根据被摄物的多组运动信息可以确定被摄物的当前速度应该为0.01m/s左右、当前方向为向左,因此被摄物的当前运动信息不准确;在另一个实施例中,被摄物的多组运动信息按获取的时间分别为:(0.01m/s、向左)、(0.011m/s、向左)、(0.012m/s向左)、(0.011m/s、向右),其中最后一组(0.011m/s、向右)为被摄物的当前运动信息,根据被摄物的多组运动信息可以确定被摄物的当前速度应该为0.01m/s左右、当前方向为向左,因此被摄物的当前运动信息不准确;在另一个实施例中,被摄物的多组运动信息按获取的时间分别为:(0.01m/s、向左)、(0.011m/s、向左)、(0.012m/s向左)、(0.011m/s、向左),其中最后一组(0.011m/s、向左)为被摄物的当前运动信息,根据被摄物的多组运动信息可以确定被摄物的当前速度应该为0.01m/s左右、当前方向为向左,因此被摄物的当前运动信息准确。
请参阅图6和图7,在某些实施方式中,成像模组10包括镜头12、图像传感器14和光学防抖马达16,步骤04包括:
0424:在成像模组10拍摄图像时根据被摄物的运动信息控制光学防抖马达16驱动镜头12和/或图像传感器14以改变镜头12和图像传感器14的相对位置。
请参阅图3和图7,在某些实施方式中,成像模组10包括镜头12、图像传感器14和光学防抖马达16,处理器20用于在成像模组10拍摄图像时根据被摄物的运动信息控制光学防抖马达16驱动镜头12和/或图像传感器14以改变镜头12和图像传感器14的相对位置。
也即是说,步骤0424可以由处理器20实现。
如此,可以通过光学防抖马达16驱动镜头12和/或图像传感器14以对图像进行光学防抖的运动补偿。
具体地,光学防抖马达16驱动镜头12和/或图像传感器14,可以理解为,光学防抖马达16驱动镜头12,或,光学防抖马达16驱动图像传感器14,或光学防抖马达16驱动镜头12和图像传感器14。
在某些实施方式中,光学防抖马达16驱动镜头12,具体地,光学防抖马达16可以与镜头12连接,从而在光学防抖马达16工作时移动镜头12以改变镜头12和图像传感器14的相对位置。需要说明的是,为了减小成像模组10的光轴的偏离,一般光学防抖马达16驱动镜头12进行平移,而不控制镜头12进行转动。在某些实施方式中,镜头12包括镜片组,光学防抖马达16驱动镜头12,可以理解为,光学防抖马达16驱动镜片组中的一个或多个镜片进行移动。此外,在某些实施方式中,镜头12还可以包括棱镜,光学防抖马达16驱动镜头12,可以理解为,光学防抖马达16移动棱镜。
在某些实施方式中,被摄物的运动信息包括速度和方向,光学防抖马达16以与被摄物的速度和方向相同的速度和方向驱动镜头12或图像传感器14。
请参阅图8,在某些实施方式中,步骤04包括:
0426:根据被摄物的运动信息计算成像模组10的感光度与曝光时间;
0428:以计算获得的感光度和曝光时间拍摄图像;
0432:利用图像的边缘处理图像以进行运动补偿。
请再次参阅图3,在某些实施方式中,处理器20用于根据被摄物的运动信息计算成像模组10的感光度与曝光时间、以感光度和曝光时间拍摄图像、及利用图像的边缘处理图像以进行运动补偿。
也即是说,步骤0426、步骤0428和步骤0432均可以由处理器20实现。
如此,可以通过图像处理对图像进行电子防抖的运动补偿。
具体地,被摄物的运动信息可以为速度和方向,在被摄物的运动速度较快时,一般需要减小曝光时间以避免图像出现重影,为了保证一定的曝光量,同时需要提高成像模组10的感光度,因此,可以根据被摄物的运动信息计算成像模组10的感光度与曝光时间,从而能够以合适的感光度和曝光时间拍摄图像,以改善被摄物的运动而导致图像模糊的问题。进一步地,还可以利用图像的边缘对图像进行处理以实现运动补偿,具体地,可以控制成像模组10采集90%左右的画面,再对被摄物的运动信息进行模糊判断,进而利用剩下的10%左右画面进行运动补偿。
请参阅图2和图9,在某些实施方式中,成像系统1000还包括第二运动传感器40,第二运动传感器40设置在成像模组10上,防抖方法还包括:
06:控制第二运动传感器40检测成像模组10的运动信息;
步骤04包括:
0434:根据被摄物的运动信息和成像模组10的运动信息对图像进行运动补偿。
请参阅图2和图3,在某些实施方式中,电子装置100还包括第二运动传感器40,处理器20用于控制第二运动传感器40检测成像模组10的运动信息、及根据被摄物的运动信息和成像模组10的运动信息对图像进行运动补偿。
也即是说,步骤0434和步骤06均可以由处理器20实现。
根据被摄物的运动信息和成像模组10的运动信息对图像进行运动补偿,可以更加全面地避免被摄物的运动和成像模组10的运动带来的影响,进而获得更加清晰的图像。
具体地,第二运动传感器40可以为角速度传感器、角加速度传感器和加速度传感器中的至少一种。在一个实施例中,第二运动传感器40为角速度传感器,例如为陀螺仪,通过处理陀螺仪测量的成像模组10的角速度可以获得成像模组10的运动信息。
在某些实施方式中,根据被摄物的运动信息和成像模组10的运动信息对图像进行运动补偿,具体可以为,根据被摄物的运动信息和成像模组10的运动信息确定被摄物与成像模组10的相对运动信息,根据被摄物与成像模组10的相对运动信息对图像进行运动补偿。在一个实施例中,被摄物的运动信息与成像模组10的运动信息一致,则被摄物与成像模组10相对静止,此时不需要对图像进行运动补偿;在另一个实施例中,被摄物的运动信息与成像模组10的运动信息不一致,则被摄物与成像模组10相对运动,此时需要根据被摄物与成像模组10的相对运动信息对图像进行补偿。
请参阅图10,在某些实施方式中,防抖方法还包括:
步骤08:根据输入指令确定是否进入获取第一运动传感器200检测的被摄物的运动信息的步骤。
请再次参阅图3,在某些实施方式中,处理器20还用于根据输入指令确定是否进入获取被摄物的运动信息的步骤。
也即是说,步骤08可以由处理器20实现。
如此,可以根据输入指令确定是否执行防抖方法以开启防抖功能。
具体地,由于防抖功能需要对图像进行运动补偿,因此开启防抖功能时会导致电子装置100的功耗变高,可以根据用户的输入指令确定是否需要开启防抖功能。另外,由于本发明实施方式的防抖方法会获取第一运动传感器200检测的运动信息,因此在第一运动传感器200没有设置在被摄物上时,可以根据输入指令关闭防抖功能以避免根据错误的运动信息执行本发明实施方式的防抖方法。在某些实施方式中,在输入指令为不开启防抖功能时,不进入获取第一运动传感器200检测的被摄物的运动信息的步骤,具体可以为,成像模组10不接收第一运动传感器200检测的运动信息,并重新进入步骤08。
本发明实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质,当计算机可执行指令被一个或多个处理器执行时,使得处理器执行以下步骤:
02:获取第一运动传感器200检测的被摄物的运动信息;和
04:根据被摄物的运动信息对成像模组10拍摄的图像进行运动补偿。
更进一步地,当计算机可执行指令被一个或多个处理器执行时,处理器还可以执行以下步骤:
0412:根据被摄物的多组运动信息计算被摄物的运动信息的平均值;和
0414:根据被摄物的运动信息的平均值对图像进行运动补偿。
图11为一个实施例中计算机设备500的内部结构示意图。如图11所示,该计算机设备500包括通过系统总线510连接的处理器520、存储器530(例如为非易失性存储介质)、内存储器540、显示屏550和输入装置560。其中,计算机设备500的存储器530存储有操作系统和计算机可读指令。该计算机可读指令可被处理器520执行,以实现本发明实施方式的防抖方法。该处理器520用于提供计算和控制能力,支撑整个计算机设备500的运行。计算机设备500的内存储器530为存储器520中的计算机可读指令的运行提供环境。计算机设备500的显示屏550可以是液晶显示屏或者电子墨水显示屏等,输入装置560可以是显示屏550上覆盖的触摸层,也可以是计算机设备500外壳上设置的按键、轨迹球或触控板,也可以是外接的键盘、触控板或鼠标等。该计算机设备500可以是手机、平板电脑、笔记本电脑、个人数字助理或穿戴式设备(例如智能手环、智能手表、智能头盔、智能眼镜)等。本领域技术人员可以理解,图11中示出的结构,仅仅是与本发明方案相关的部分结构的示意图,并不构成对本发明方案所应用于其上的计算机设备500的限定,具体的计算机设备500可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
请参阅图12,本发明实施例的计算机设备500中包括图像处理电路800,图像处理电路800可以利用硬件和/或软件组件实现,可包括定义ISP(Image Signal Processing,图像信号处理)管线的各种处理单元。图12为一个实施例中图像处理电路800的示意图。如图12所示,为便于说明,仅示出与本发明实施例相关的图像处理技术的各个方面。
如图12所示,图像处理电路800包括ISP处理器810(ISP处理器810可为处理器520)和控制逻辑器820。成像装置830捕捉的图像数据首先由ISP处理器810处理,ISP处理器810对图像数据进行分析以捕捉可用于确定成像装置830的一个或多个控制参数的图像统计信息。成像装置830可包括镜头832和图像传感器834。图像传感器834可包括色彩滤镜阵列(如Bayer滤镜),图像传感器834可获取每个成像像素捕捉的光强度和波长信息,并提供可由ISP处理器810处理的一组原始图像数据。传感器840(如陀螺仪)可基于传感器840接口类型把采集的图像处理的参数(如防抖参数)提供给ISP处理器810。传感器840接口可以为SMIA(Standard Mobile Imaging Architecture,标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。
此外,图像传感器834也可将原始图像数据发送给传感器840,传感器840可基于传感器840接口类型把原始图像数据提供给ISP处理器810,或者传感器840将原始图像数据存储到图像存储器850中。
ISP处理器810按多种格式逐个像素地处理原始图像数据。例如,每个图像像素可具有8、10、12或14比特的位深度,ISP处理器810可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中,图像处理操作可按相同或不同的位深度精度进行。
ISP处理器810还可从图像存储器850接收图像数据。例如,传感器840接口将原始图像数据发送给图像存储器850,图像存储器850中的原始图像数据再提供给ISP处理器810以供处理。图像存储器850可为存储器530、存储器530的一部分、存储设备、或电子设备内的独立的专用存储器,并可包括DMA(Direct Memory Access,直接直接存储器存取)特征。
当接收到来自图像传感器834接口或来自传感器840接口或来自图像存储器850的原始图像数据时,ISP处理器810可进行一个或多个图像处理操作,如时域滤波。处理后的图像数据可发送给图像存储器850,以便在被显示之前进行另外的处理。ISP处理器810从图像存储器850接收处理数据,并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。ISP处理器810处理后的图像数据可输出给显示器870(显示器870可包括显示屏550),以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit,图形处理器)进一步处理。此外,ISP处理器810的输出还可发送给图像存储器850,且显示器870可从图像存储器850读取图像数据。在一个实施例中,图像存储器850可被配置为实现一个或多个帧缓冲器。此外,ISP处理器810的输出可发送给编码器/解码器860,以便编码/解码图像数据。编码的图像数据可被保存,并在显示于显示器870设备上之前解压缩。编码器/解码器860可由CPU或GPU或协处理器实现。
ISP处理器810确定的统计数据可发送给控制逻辑器820单元。例如,统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、镜头832阴影校正等图像传感器834统计信息。控制逻辑器820可包括执行一个或多个例程(如固件)的处理元件和/或微控制器,一个或多个例程可根据接收的统计数据,确定成像装置830的控制参数及ISP处理器810的控制参数。例如,成像装置830的控制参数可包括传感器840控制参数(例如增益、曝光控制的积分时间、防抖参数等)、照相机闪光控制参数、镜头832控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如,在RGB处理期间)的增益水平和色彩校正矩阵,以及镜头832阴影校正参数。
以下为运用图11中处理器520或运用图12中图像处理电路800(具体为ISP处理器810)实现防抖方法的步骤:
02:获取第一运动传感器200检测的被摄物的运动信息;和
04:根据被摄物的运动信息对成像模组10拍摄的图像进行运动补偿。
更进一步地,运用图11中处理器520或运用图12中图像处理电路800(具体为ISP处理器810)还可以执行以下步骤:
0412:根据被摄物的多组运动信息计算被摄物的运动信息的平均值;和
0414:根据被摄物的运动信息的平均值对图像进行运动补偿。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一非易失性计算机可读存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)等。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (21)

1.一种防抖方法,用于成像系统,其特征在于,所述成像系统包括成像模组和第一运动传感器,所述成像模组和所述第一运动传感器进行通信,所述第一运动传感器用于设置在被摄物上,所述防抖方法包括:
获取所述第一运动传感器检测的所述被摄物的运动信息;和
根据所述被摄物的运动信息对所述成像模组拍摄的图像进行运动补偿。
2.根据权利要求1所述的防抖方法,其特征在于,所述获取所述第一运动传感器检测的所述被摄物的运动信息的步骤是在所述成像模组开启前执行的。
3.根据权利要求1所述的防抖方法,其特征在于,所述被摄物的运动信息包括多组,所述根据所述被摄物的运动信息对所述成像模组拍摄的图像进行运动补偿的步骤包括:
根据所述被摄物的多组运动信息计算所述被摄物的运动信息的平均值;和
根据所述被摄物的运动信息的平均值对所述图像进行运动补偿。
4.根据权利要求1所述的防抖方法,其特征在于,所述被摄物的运动信息包括多组,所述被摄物的多组运动信息包括所述被摄物的当前运动信息,所述运动信息包括速度和方向,所述根据所述被摄物的运动信息对所述成像模组拍摄的图像进行运动补偿的步骤包括:
根据所述被摄物的多组运动信息确定所述被摄物的速度和方向的变化趋势;
根据所述变化趋势确定所述被摄物的当前运动信息是否准确;
在所述被摄物的当前运动信息准确时根据所述被摄物的当前运动信息对所述图像进行运动补偿。
5.根据权利要求1所述的防抖方法,其特征在于,所述成像模组包括镜头、图像传感器和光学防抖马达,所述根据所述被摄物的运动信息对所述成像模组拍摄的图像进行运动补偿的步骤包括:
在所述成像模组拍摄所述图像时根据所述被摄物的运动信息控制所述光学防抖马达驱动所述镜头和/或所述图像传感器以改变所述镜头和所述图像传感器的相对位置。
6.根据权利要求1所述的防抖方法,其特征在于,所述根据所述被摄物的运动信息对所述成像模组拍摄的图像进行运动补偿的步骤包括:
根据所述被摄物的运动信息计算所述成像模组的感光度与曝光时间;
以所述感光度和所述曝光时间拍摄所述图像;
利用所述图像的边缘处理所述图像以进行运动补偿。
7.根据权利要求1所述的防抖方法,其特征在于,所述成像系统还包括第二运动传感器,所述第二运动传感器设置在所述成像模组上,所述防抖方法还包括:
控制所述第二运动传感器检测所述成像模组的运动信息;
所述根据所述被摄物的运动信息对所述成像模组拍摄的图像进行运动补偿的步骤包括:
根据所述被摄物的运动信息和所述成像模组的运动信息对所述图像进行运动补偿。
8.根据权利要求1所述的防抖方法,其特征在于,所述防抖方法还包括:
根据输入指令确定是否进入所述获取所述第一运动传感器检测的所述被摄物的运动信息的步骤。
9.一种电子装置,其特征在于,包括成像模组和处理器,所述处理器用于获取被摄物的运动信息、及根据所述被摄物的运动信息对所述成像模组拍摄的图像进行运动补偿。
10.根据权利要求9所述的电子装置,其特征在于,所述成像模组用于与设置在被摄物上的第一运动传感器通信,所述处理器用于获取所述第一运动传感器检测的所述被摄物的运动信息。
11.根据权利要求10所述的电子装置,其特征在于,所述获取所述第一运动传感器检测的所述被摄物的运动信息的步骤是在所述成像模组开启前执行的。
12.根据权利要求9所述的电子装置,其特征在于,所述被摄物的运动信息包括多组,所述处理器用于根据所述被摄物的多组运动信息计算所述被摄物的运动信息的平均值、及根据所述被摄物的运动信息的平均值对所述图像进行运动补偿。
13.根据权利要求9所述的电子装置,其特征在于,所述被摄物的运动信息包括多组,所述被摄物的多组运动信息包括所述被摄物的当前运动信息,所述运动信息包括速度和方向,所述处理器用于根据所述被摄物的多组运动信息确定所述被摄物的速度和方向的变化趋势、根据所述变化趋势确定所述被摄物的当前运动信息是否准确、及在所述被摄物的当前运动信息准确时根据所述被摄物的当前运动信息对所述图像进行运动补偿。
14.根据权利要求9所述的电子装置,其特征在于,所述成像模组包括镜头、图像传感器和光学防抖马达,所述处理器用于在所述成像模组拍摄所述图像时根据所述被摄物的运动信息控制所述光学防抖马达驱动所述镜头和/或所述图像传感器以改变所述镜头和所述图像传感器的相对位置。
15.根据权利要求9所述的电子装置,其特征在于,所述处理器用于根据所述被摄物的运动信息计算所述成像模组的感光度与曝光时间、以所述感光度和所述曝光时间拍摄所述图像、及利用所述图像的边缘处理所述图像以进行运动补偿。
16.根据权利要求9所述的电子装置,其特征在于,所述电子装置还包括第二运动传感器,所述处理器用于控制所述第二运动传感器检测所述成像模组的运动信息、及根据所述被摄物的运动信息和所述成像模组的运动信息对所述图像进行运动补偿。
17.根据权利要求9所述的电子装置,其特征在于,所述处理器还用于根据输入指令确定是否进入所述获取被摄物的运动信息的步骤。
18.根据权利要求9所述的电子装置,其特征在于,所述电子装置还包括壳体,所述成像模组安装在所述壳体上并从所述壳体暴露以拍摄所述图像。
19.一种成像系统,其特征在于,包括:
权利要求9-18任意一项所述的电子装置;和
与所述成像模组进行通信的第一运动传感器。
20.一个或多个包含计算机可执行指令的非易失性计算机可读存储介质,当所述计算机可执行指令被一个或多个处理器执行时,使得所述处理器执行权利要求1至8中任一项所述的防抖方法。
21.一种计算机设备,包括存储器及处理器,所述存储器中储存有计算机可读指令,所述指令被所述处理器执行时,使得所述处理器执行权利要求1至8中任一项所述的防抖方法。
CN201810458219.4A 2018-05-14 2018-05-14 防抖方法、电子装置、成像系统、存储介质和计算机设备 Pending CN108540725A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810458219.4A CN108540725A (zh) 2018-05-14 2018-05-14 防抖方法、电子装置、成像系统、存储介质和计算机设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810458219.4A CN108540725A (zh) 2018-05-14 2018-05-14 防抖方法、电子装置、成像系统、存储介质和计算机设备

Publications (1)

Publication Number Publication Date
CN108540725A true CN108540725A (zh) 2018-09-14

Family

ID=63477481

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810458219.4A Pending CN108540725A (zh) 2018-05-14 2018-05-14 防抖方法、电子装置、成像系统、存储介质和计算机设备

Country Status (1)

Country Link
CN (1) CN108540725A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109451240A (zh) * 2018-12-04 2019-03-08 百度在线网络技术(北京)有限公司 对焦方法、装置、计算机设备和可读存储介质
CN109831626A (zh) * 2019-01-30 2019-05-31 中新科技集团股份有限公司 一种拍摄方法、装置、设备及计算机可读存储介质
CN111416943A (zh) * 2020-04-28 2020-07-14 成都纵横自动化技术股份有限公司 相机防抖方法、装置、航测相机和计算机可读存储介质
WO2021068208A1 (zh) * 2019-10-11 2021-04-15 南昌欧菲光电技术有限公司 摄像模组及电子设备
WO2022111263A1 (zh) * 2020-11-25 2022-06-02 宁波舜宇光电信息有限公司 用于光学致动器的驱动结构及相应的摄像模组
CN115278056A (zh) * 2022-06-24 2022-11-01 维沃移动通信有限公司 拍摄方法、装置、电子设备及介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104469139A (zh) * 2013-09-24 2015-03-25 佳能株式会社 图像捕获装置和图像捕获方法
US20160134799A1 (en) * 2014-11-11 2016-05-12 Invenios In-Vehicle Optical Image Stabilization (OIS)
CN105939454A (zh) * 2015-03-03 2016-09-14 佳能株式会社 摄像设备及其控制方法
CN106713770A (zh) * 2017-03-27 2017-05-24 联想(北京)有限公司 一种拍照处理方法及电子设备
CN107483810A (zh) * 2017-07-27 2017-12-15 维沃移动通信有限公司 一种防抖的方法、移动终端及计算机可读存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104469139A (zh) * 2013-09-24 2015-03-25 佳能株式会社 图像捕获装置和图像捕获方法
US20160134799A1 (en) * 2014-11-11 2016-05-12 Invenios In-Vehicle Optical Image Stabilization (OIS)
CN105939454A (zh) * 2015-03-03 2016-09-14 佳能株式会社 摄像设备及其控制方法
CN106713770A (zh) * 2017-03-27 2017-05-24 联想(北京)有限公司 一种拍照处理方法及电子设备
CN107483810A (zh) * 2017-07-27 2017-12-15 维沃移动通信有限公司 一种防抖的方法、移动终端及计算机可读存储介质

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109451240A (zh) * 2018-12-04 2019-03-08 百度在线网络技术(北京)有限公司 对焦方法、装置、计算机设备和可读存储介质
CN109831626A (zh) * 2019-01-30 2019-05-31 中新科技集团股份有限公司 一种拍摄方法、装置、设备及计算机可读存储介质
WO2021068208A1 (zh) * 2019-10-11 2021-04-15 南昌欧菲光电技术有限公司 摄像模组及电子设备
CN111416943A (zh) * 2020-04-28 2020-07-14 成都纵横自动化技术股份有限公司 相机防抖方法、装置、航测相机和计算机可读存储介质
CN111416943B (zh) * 2020-04-28 2021-12-28 成都纵横自动化技术股份有限公司 相机防抖方法、装置、航测相机和计算机可读存储介质
WO2022111263A1 (zh) * 2020-11-25 2022-06-02 宁波舜宇光电信息有限公司 用于光学致动器的驱动结构及相应的摄像模组
CN115278056A (zh) * 2022-06-24 2022-11-01 维沃移动通信有限公司 拍摄方法、装置、电子设备及介质

Similar Documents

Publication Publication Date Title
US11582400B2 (en) Method of image processing based on plurality of frames of images, electronic device, and storage medium
CN108540725A (zh) 防抖方法、电子装置、成像系统、存储介质和计算机设备
EP3609177B1 (en) Control method, control apparatus, imaging device, and electronic device
CN110290289B (zh) 图像降噪方法、装置、电子设备以及存储介质
WO2020207262A1 (zh) 基于多帧图像的图像处理方法、装置、电子设备
US10616459B2 (en) Method and device for dual-camera-based imaging and storage medium
CN108900782A (zh) 曝光控制方法、装置以及电子设备
WO2020038087A1 (zh) 超级夜景模式下的拍摄控制方法、装置和电子设备
WO2020038072A1 (zh) 曝光控制方法、装置和电子设备
EP3443736B1 (en) Method and apparatus for video content stabilization
CN110248106B (zh) 图像降噪方法、装置、电子设备以及存储介质
CN110012224A (zh) 摄像头防抖系统、方法、电子设备和计算机可读存储介质
CN108322669A (zh) 图像的获取方法及装置、成像装置、计算机可读存储介质和计算机设备
CN110166707B (zh) 图像处理方法、装置、电子设备以及存储介质
WO2020207261A1 (zh) 基于多帧图像的图像处理方法、装置、电子设备
WO2020057199A1 (zh) 成像方法、装置和电子设备
US20190132495A1 (en) Image processing method, and device
CN109068067A (zh) 曝光控制方法、装置和电子设备
CN108683862A (zh) 成像控制方法、装置、电子设备及计算机可读存储介质
US11233948B2 (en) Exposure control method and device, and electronic device
CN110166706B (zh) 图像处理方法、装置、电子设备以及存储介质
EP2219366B1 (en) Image capturing device, image capturing method, and image capturing program
CN110035228A (zh) 摄像头防抖系统、方法、电子设备和计算机可读存储介质
CN109089046A (zh) 图像降噪方法、装置、计算机可读存储介质及电子设备
CN109672819A (zh) 图像处理方法、装置、电子设备及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180914

RJ01 Rejection of invention patent application after publication