CN108353131B - 获取图像的方法和终端设备 - Google Patents

获取图像的方法和终端设备 Download PDF

Info

Publication number
CN108353131B
CN108353131B CN201780003148.2A CN201780003148A CN108353131B CN 108353131 B CN108353131 B CN 108353131B CN 201780003148 A CN201780003148 A CN 201780003148A CN 108353131 B CN108353131 B CN 108353131B
Authority
CN
China
Prior art keywords
controller
lens
eis
image
motion data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780003148.2A
Other languages
English (en)
Other versions
CN108353131A (zh
Inventor
李远友
刘桓宇
徐荣跃
敖欢欢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of CN108353131A publication Critical patent/CN108353131A/zh
Application granted granted Critical
Publication of CN108353131B publication Critical patent/CN108353131B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681—Motion detection
    • H04N23/6812—Motion detection based on additional sensors, e.g. acceleration sensors
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B5/00—Adjustment of optical system relative to image or object surface other than for focusing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682—Vibration or motion blur correction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682—Vibration or motion blur correction
    • H04N23/683—Vibration or motion blur correction performed by a processor, e.g. controlling the readout of an image memory
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682—Vibration or motion blur correction
    • H04N23/685—Vibration or motion blur correction performed by mechanical compensation
    • H04N23/687—Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B2205/00—Adjustment of optical system relative to image or object surface other than for focusing
    • G03B2205/0007—Movement of one or more optical elements for control of motion blur

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Adjustment Of Camera Lenses (AREA)

Abstract

本申请实施例提供了一种获取图像的方法和终端设备，当终端设备移动时，运动传感器采集所述终端设备的运动数据，并将所述运动数据发送给光学稳像OIS控制器和电子稳像EIS控制器，其中，所述终端设备包括所述运动传感器、所述OIS控制器、所述EIS控制器和图像传感器；所述OIS控制器根据所述运动数据控制所述终端设备的镜头进行移动；所述图像传感器采集图像序列；所述EIS控制器利用所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿，可以提高获取到的图像的稳定性。

Description

获取图像的方法和终端设备
技术领域
本申请涉及图像处理领域，特别涉及图像处理领域中获取图像的方法和终端设备。
背景技术
用户在拍照或录像的过程中，不可避免的存在手持抖动，或者用户可能在行动的过程中进行拍照或录像的操作，导致拍到的图像可能存在抖动模糊，录制的录像也会存在抖动和模糊。
为了解决拍照和录像的过程中抖动的问题，出现了光学稳像(Optical ImageStabilization，简称“OIS”)技术和电子稳像(Electronics Image Stabilization，简称“EIS”)技术。OIS技术是在拍照曝光期间，通过运动传感器(陀螺仪，加速度计)检测手机的抖动，OIS控制器根据运动传感器检测到的抖动数据，控制推动OIS的马达，移动镜头或者图像传感器，使得在整个曝光期间，光路尽可能保持稳定不变，进而得到清晰曝光的图像，但由于手机可能持续抖动或运动，每帧图像曝光期间，手机的位置和姿势可能有较大区别，即使有了OIS技术，在视频录制时，连续几帧图像之间仍然存在明显的抖动和错位。有两种EIS技术，一种是基于图像的内容的防抖处理，根据前后图像帧的内容，识别图像的运动情况，将图像配准对齐后，进行适当裁剪，拉伸，变形等处理后，生产相对稳定的图像序列，这种方法的缺点是运算量大，速度慢，功耗高；另一种是基于运动传感器数据来进行防抖处理，通过每帧图像曝光期间的运动传感器数据，计算出帧与帧之间的运动情况，以及一帧图像内部的运动情况，进行图像的配准进行适当裁剪，拉伸，变形等处理后，生产相对稳定的图像序列。这类算法速度快，功耗低。
为了解决拍照时的防抖和录像的防抖，越来越多的手机同时支持OIS技术和EIS技术，OIS技术主要用于拍照过程中对图像的防抖处理，EIS技术主要用于录像过程中对图像序列的防抖处理。但是对于OIS技术和基于运动传感器数据的EIS技术的方案，如果直接叠加两种防抖技术进行图像补偿，会出现过补偿的问题。
发明内容
本申请实施例提供的获取图像的方法和终端设备，可以提高获取到的图像的稳定性。
第一方面，提供了一种获取图像的方法，所述终端设备包括运动传感器、光学稳像OIS控制器、电子稳像EIS控制器、镜头和图像传感器，所述方法包括：当所述终端设备移动时，所述运动传感器采集所述终端设备的运动数据，并将所述运动数据发送给所述OIS控制器和所述EIS控制器；所述OIS控制器根据所述运动数据控制所述终端设备的镜头进行移动；所述图像传感器采集图像序列；所述EIS控制器利用所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿。
在本申请实施例中，OIS控制器根据运动传感器采集到的运动数据移动终端设备的镜头进行第一次补偿，使得图像传感器在采集图像序列时，光路尽可能保持稳定不变，从而得到清晰曝光的图像序列，EIS控制器根据运动数据以及OIS控制器控制镜头的移动信息对图像传感器采集到的图像序列进行第二次补偿，即在第二次补偿的过程中考虑了第一次补偿，避免现有技术OIS控制器根据运动数据对图像序列进行抖动补偿，并且EIS控制器也根据运动数据对图像序列进行抖动补偿，即现有技术采用相同的运动数据对图像序列进行两次补偿，并且两次补偿互相没有关联，导致出现过补偿的情况，而本申请实施例中，采用EIS技术对图像序列进行抖动补偿时，考虑了OIS技术中镜头的移动信息，可以避免现有技术出现过补偿的情况，提高图像的稳定性。
可选地，当终端设备移动时，所述OIS控制器控制镜头移动，图像传感器可以根据图像采集周期采集图像序列。
可选地，所述EIS控制器利用所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿，可以是：EIS控制器将所述镜头的运动数据转化成镜头移动像素补偿量，然后利用移动像素补偿量和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿；也可以是：OIS控制器获取到镜头的运动数据，将镜头的运动数据转化为镜头移动像素补偿量，EIS控制器直接可以获取到镜头移动像素补偿量，利用移动像素补偿量和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿。
在某些实现方式中，所述终端设备还包括霍尔传感器，在所述EIS控制器利用所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿之前，所述方法还包括：所述霍尔传感器采集所述镜头的移动信息；其中，所述EIS控制器利用所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿，包括：所述EIS控制器利用所述霍尔传感器采集的所述镜头的移动信息、所述运动数据对所述图像传感器采集的所述图像序列进行抖动补偿。
在本申请实施例中，霍尔传感器可以感知镜头的移动信息，并采集终端设备的镜头的移动信息。
在某些实现方式中，在所述霍尔传感器采集所述镜头移动的移动信息之后，所述方法还包括：所述OIS控制器或所述EIS控制器将所述镜头的移动信息转换为镜头移动像素补偿量；其中，所述EIS控制器利用所述霍尔传感器采集的所述镜头的移动信息、所述运动数据对所述图像传感器采集的所述图像序列进行抖动补偿，包括：所述EIS控制器利用所述镜头移动像素补偿量和所述运动数据对所述图像传感器采集的所述图像序列进行抖动补偿。
在本申请实施例中，OIS控制器可以将镜头的移动信息转换为镜头移动像素补偿量，EIS控制器也可以将镜头的移动信息转换为镜头移动像素补偿量，ISP也可以将镜头的移动信息转换为移动像素补偿量，即霍尔传感器可以只采集镜头的物理移动数据，OIS控制器、EIS控制器或者是ISP将镜头的物理移动数据转换成镜头移动像素补偿量。
在某些实现方式中，所述EIS控制器利用所述镜头移动像素补偿量和所述运动数据对所述图像传感器采集的所述图像序列进行抖动补偿，包括：所述EIS控制器根据所述运动数据确定所述图像传感器采集的所述图像序列的运动像素补偿量；所述EIS控制器将所述运动像素补偿量减去所述镜头移动像素补偿量得到图像序列像素补偿量；所述EIS控制器利用所述图像序列像素补偿量对所述图像传感器采集的图像序列进行抖动补偿。
在本申请实施例中，EIS控制器可以根据运动数据确定图像序列的运动像素补偿量，但是在图像序列采集的过程中已经进行了镜头移动，具体镜头移动体现在镜头移动像素补偿量上，因此在EIS控制器进行像素补偿的过程中，需要将镜头移动像素补偿量减掉，这样不会出现过多的补偿，提高图像的稳定性。
在某些实现方式中，在所述EIS控制器利用所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿之前，所述方法还包括：所述OIS控制器利用帧同步信号(vsync)获取所述运动数据和所述镜头的移动信息；所述OIS控制器将所述运动数据和所述镜头的移动信息发送给所述EIS控制器；其中，所述EIS控制器利用所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿，包括：所述EIS控制器利用所述OIS控制器发送的根据所述帧同步信号获取的所述运动数据和所述镜头的移动信息对所述图像传感器采集的图像序列进行抖动补偿。
可选地，EIS控制器也可以利用帧同步信号获取所述运动数据和所述镜头的移动信息，EIS控制器可以将获取到的运动数据发送给OIS控制器；或者是ISP也可以利用帧同步信号获取所述运动数据和所述镜头的移动信息，ISP将运动数据发送给OIS控制器和EIS控制器，将所述镜头的移动信息发送给EIS控制器等。
在某些实现方式中，所述终端设备还包括：图像信号处理器(Image SignalProcessor，简称“ISP”)，所述OIS控制器将所述运动数据和所述镜头的移动信息发送给所述EIS控制器，包括：所述OIS控制器将所述运动数据和所述镜头的移动信息通过ISP发送给所述EIS；所述EIS接收所述OIS发送的根据所述vsync信号获取的所述运动数据和所述镜头的移动信息，包括：所述EIS通过所述ISP接收所述OIS发送的根据所述vsync信号获取的所述运动数据和所述镜头的移动信息。
在某些实现方式中，在所述图像传感器根据所述镜头的移动采集图像序列之后，所述方法还包括：所述图像传感器将采集到的所述图像序列发送给所述ISP；所述ISP接收所述传感器发送的采集到的所示图像序列，将所述图像传感器采集到的所述图像序列发送给所述EIS。
在某些实现方式中，所述运动数据包括：所述终端设备在X轴、Y轴和Z轴上的旋转数据，和/或，所述终端设备在X轴和Y轴上的平移数据。
运动数据可以在终端设备在某一轴上的旋转数据或平移数据，当终端设备在某一轴上没有移动时，则认为在该轴上的移动数据为0。
在某些实现方式中，所述运动传感器包括陀螺仪和/或加速度计等。
第二方面，提供了一种终端设备，所述终端设备包括运动传感器、光学稳像OIS控制器、电子稳像EIS控制器和图像传感器，所述运动传感器用于，当所述终端设备移动时，采集所述终端设备的运动数据，并将所述运动数据发送给所述OIS控制器和所述EIS控制器；所述OIS控制器用于根据所述运动数据控制所述终端设备的镜头进行移动；所述图像传感器用于采集图像序列；所述EIS控制器用于通过所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿。
在某些实现方式中，所述终端设备还包括：霍尔传感器，用于在所述EIS控制器通过所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿之前，采集所述镜头的移动信息；所述EIS控制器具体用于：通过所述霍尔传感器采集的所述镜头的移动信息和所述运动数据对所述图像传感器采集的所述图像序列进行抖动补偿。
在某些实现方式中，所述OIS控制器或所述EIS控制器还用于：在所述霍尔传感器采集所述镜头移动的移动信息之后，将所述镜头的移动信息转换为镜头移动像素补偿量；所述EIS控制器具体还用于：通过所述镜头移动像素补偿量和所述运动数据对所述图像传感器采集的所述图像序列进行抖动补偿。
在某些实现方式中，所述EIS控制器具体还用于：根据所述运动数据确定所述图像传感器采集的所述图像序列的运动像素补偿量；将所述运动像素补偿量减去所述镜头移动像素补偿量得到图像序列像素补偿量；利用所述图像序列像素补偿量对所述图像传感器采集的图像序列进行抖动补偿。
在某些实现方式中，所述OIS控制器还用于：在所述EIS控制器利用所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿之前，利用帧同步信号获取所述运动数据和所述镜头的移动信息；将所述运动数据和所述镜头的移动信息发送给所述EIS控制器；所述EIS控制器具体还用于：通过所述OIS控制器发送的根据所述帧同步信号获取的所述运动数据和所述镜头的移动信息对所述图像传感器采集的图像序列进行抖动补偿。
在某些实现方式中，所述终端设备还包括：图像信号处理器ISP，所述OIS控制器还用于：将所述运动数据和所述镜头的移动信息通过ISP发送给所述EIS控制器；所述EIS控制器具体用于：通过所述ISP接收所述OIS控制器发送的根据所述帧同步信号获取的所述运动数据和所述镜头的移动信息。
在某些实现方式中，所述图像传感器还用于：在采集图像序列之后，将采集到的所述图像序列发送给所述ISP；所述ISP接收所述图像传感器发送的采集到的所述图像序列，将所述图像传感器采集到的所述图像序列发送给所述EIS控制器。
在某些实现方式中，所述运动数据包括：所述终端设备在X轴、Y轴和Z轴上的旋转数据，和/或，所述终端设备在X轴和Y轴上的平移数据。
第三方面，提供了一种计算机可读介质，用于存储计算机程序，该计算机程序包括用于执行第一方面或第一方面的任意可能的实现方式中的方法的指令。
附图说明
图1示出了本申请实施例的OIS系统示的示意性框图。
图2示出了本申请实施例的OIS模组的示意图。
图3示出了霍尔传感器的测量原理示意图。
图4示出了本申请实施例的EIS系统的示意图。
图5示出了本申请实施例的应用场景示意图。
图6示出了现有技术的获取图像的方法示意图。
图7示出了本申请实施例的获取图像的方法示意图。
图8示出了本申请实施例的终端设备的示意性框图。
图9示出了本申请实施例的另一终端设备的示意性框图。
具体实施方式
本申请实施例的技术方案可以应用于终端(Terminal)设备，终端设备可以是但不限于移动台(Mobile Station，MS)、移动终端(Mobile Terminal)、移动电话(MobileTelephone)、手机(handset)及便携设备(portable equipment)等，可以经无线接入网(例如，Radio Access Network，RAN)与一个或多个核心网进行通信，终端设备可以是移动终端，如移动电话(或称为“蜂窝”电话)和具有移动终端的计算机，例如，可以是便携式、袖珍式、手持式、计算机内置的或者车载的移动终端，它们与无线接入网交换语言和/或数据。或者，该终端设备也可以是各类带有触摸屏的产品，例如平板电脑，触屏手机，触屏设备，手机终端等，对此不作限制。进一步地，该终端设备可以是具有拍照功能的设备，比如带有摄像头的手机、平板电脑或其他具有拍照功能的设备。
下面对本申请实施例用到的EIS技术和OIS技术进行简单的介绍。
OIS技术通过镜头的移动来纠正“光轴偏移”，其原理是通过镜头内的陀螺仪侦测到微小的移动，然后将信号传至微处理器，处理器计算需要补偿的位移量，然后通过补偿镜片组，根据镜头的抖动方向及位移量加以补偿；从而有效的克服因相机的振动产生的影像模糊。
例如，图1示出了OIS系统100的示意性框图，包括图像传感器101、OIS控制器102、陀螺仪103、X-轴霍尔传感器104、Y-轴霍尔传感器107、Y-轴OIS马达105、X-轴OIS马达108、镜头106。具体地，当曝光期间终端设备发生运动时，图像传感器101用于感光，并将光信号转换为模拟的图像信号，并将模拟的图像转换为数据图像后发送给图像处理器进行处理，OIS控制器102读取陀螺仪103的数据获取到终端设备的运动数据，OIS控制器102根据运动数据推动X-轴OIS马达108在X轴方向上移动镜头106，并且推动Y-轴OIS马达105在Y轴方向上移动镜头106。X-轴霍尔传感器104检测镜头106在X-轴方向的移动，X-轴霍尔传感器104将镜头106在X-轴方向上移动的实时位置传给OIS控制器102；Y-轴霍尔传感器107检测镜头106在Y-轴方向的移动，Y-轴霍尔传感器107将镜头106在Y-轴方向上移动的实时位置传给OIS控制器102，OIS控制器102根据新的镜头106的位置和陀螺仪103获取新的运动数据继续推动镜头106，可以连续的实现闭环控制。
更具体地，如图2所示OIS模组200可以包括：霍尔传感器201、OIS线圈202、镜头203、弹簧204、霍尔磁铁205和OIS磁铁206等，例如镜头203可以是图1中的镜头106，霍尔传感器201可以是图1中的X-轴霍尔传感器104和/或Y-轴霍尔传感器107。图2中左半部分表示OIS模组200的侧视图，图2的右半部分表示OIS模组200的俯视图。具体地，镜头203通过弹簧204悬挂于模组内部，当需要推动镜头203时，OIS控制器102通过控制OIS线圈202上的电流产生电磁效应，与模组200内部的OIS磁铁206发生磁力，推动镜头203移动。当镜头203移动时，带动镜头上的霍尔磁铁205位置变化，位于模组内部的霍尔传感器201可以侦测到镜头203的实时移动，并将Hall信号传给OIS控制器102。OIS补偿包括平移镜头203，偏转镜头203，移动图像传感器101等。
更进一步地，图3示出了霍尔传感器测镜头移动信息的原理，在半导体薄片两端有控制电流I，并在薄片的垂直方向施加磁感应强度为B的匀强磁场，则在垂直于电流和磁场的方向上，将产生电势差为UH的霍尔电压，这种现象叫霍尔效应，霍尔效应的产生是运动电荷在磁场中受到洛仑兹力作用的结果。当图2中的镜头203移动时，带动霍尔磁铁205一起运动，从而改变霍尔传感器201感知的磁场强度，霍尔传感器201输出的霍尔电压也相应的发生变化。在线性行程范围内，电压的变化与位移大小成正比，从而可以通过霍尔传感器201的输出测量镜头的移动距离。
EIS技术是指利用数字图像处理技术和电子设备相结合的方法，去除因为摄像机不规则随机运动而在视频图像序列中引入的图像扰动，进而稳定图像序列的处理过程，目的在于消除或减轻由于摄像机晃动所造成的图像序列帧之间的运动，从而得到稳定清晰的图像。一种EIS技术是基于图像的内容的防抖处理，根据前后图像帧的内容，识别图像的运动情况，将图像配置对齐后，进行适当裁剪，拉伸，变形等处理后，生产相对稳定的图像序列，这种方法的缺点是运算量大，速度慢，功耗高；另一种EIS技术是基于运动传感器数据来进行防抖处理，通过每帧图像曝光期间的运动传感器数据，计算出帧与帧之间的运动情况，以及一帧图像内部的运动情况，进行图像的配置，进行适当裁剪，拉伸，变形等处理后，生产相对稳定的图像序列。这类算法速度快，功耗低。例如，图4示出了EIS系统处理图像的过程300示意图，包括五个步骤：
S301，输入YUV图像，Y表示明亮度(Luminance或Luma)，也就是灰阶值，U和V表示的则是色度(Chrominance或Chroma)，或者也可以输入RGB图像，R表示红色(Red)，G表示绿色(Green)，B表示蓝色(Blue)。
S302，对输入的图像序列进行统计；
S303，利用霍尔传感器201采集的运动数据对图像序列进行运动估计，得到图像运动估计量；
S304，利用S303得到的运动估计进行运动补偿，得到处理后的YUV图像；
S305，输出YUV图像。
图5示出了本申请实施例的应用场景示意图400，包括：
运动传感器410，用于采集终端设备的运动数据，并将采集到的运动数据发送给所述OIS控制器430，运动数据可以包括终端设备沿X轴、Y轴和Z轴至少一个方向的旋转数据，运动数据也可以包括终端设备沿X轴方向和/或Y轴方向的平移数据，其中，所述运动传感器410可以是陀螺仪或加速度计等，可选地，所述运动传感器410可以是三轴陀螺仪或三轴加速度计等。
图像传感器420，用于采集图像数据，并将采集到的图像数据发送给ISP 440，可选地，图像传感器420采集的图像数据是经过OIS技术补偿过的图像数据，即在图像传感器420采集图像数据的瞬间，OIS技术已经将终端设备的镜头进行了移动，本申请实施例中的图像数据可以是照片或者是视频等数据，例如，图像传感器420可以是电源耦合元件(Charge-coupled Device，简称“CCD”)或者可以是感光元件(Complementary Metal OxideSemiconductor，简称“COMS”)。
OIS控制器430，用于根据运动传感器410采集到的终端设备的运动数据移动所述终端设备的镜头，所述OIS控制器430还用于根据帧同步信号(vsync)提取每帧图像曝光期间的运动数据和终端设备的镜头的移动信息，并将根据帧同步信号提取到的运动传感器数据和终端设备镜头的移动信息发送给ISP440。
ISP 440，用于接收OIS控制器430发送的运动数据和所述终端设备的镜头的移动信息，还用于接收图像传感器420发送的图像数据，并将接收到的运动数据、镜头的移动信息和图像数据发送给EIS控制器450。
EIS控制器450，用于接收ISP440发送的运动数据、镜头的移动信息和图像数据，并根据运动数据和镜头的移动信息对图像数据进行抖动补偿，得到补偿后的图像数据。
现有技术中，如图6所示，利用OIS技术和EIS技术对每一帧图像进行抖动补偿，具体，OIS控制器开启后，根据陀螺仪501，采集到的运动数据进行光学防抖补偿，运动传感器410可以是陀螺仪501，陀螺仪501可以是OIS系统中的陀螺仪103，每一帧图像的抖动变小了，所以两帧之间的抖动也会变小。但是EIS控制器和OIS控制器接收相同的是运动传感器数据。如果EIS控制器根据运动传感器数据进行图像帧间抖动补偿，其补偿量将大于两帧图像之间的实际差异，会出现过补偿的情况，导致采集到的图像不真实。OIS补偿的抖动范围，通常是低于10hz，小于1度的抖动，而EIS可以补偿更大范围的抖动。OIS技术的原理就是利用一个滤波器502，将运动传感器信号分离，将小于10hz，小于1度的运动信号传给OIS系统100，将其他信号传给EIS系统300。将小幅抖动的信号传给OIS系统100后，OIS系统100并不一定会完全补偿。但EIS系统300只能补偿分离后的信号，因此OIS系统100和EIS系统300联合补偿后，可能会出现少补偿的情况，导致整体防抖效果不佳。并且滤波会带来信号损失，导致OIS系统100不一定能收到全部可以被OIS系统100补偿的运动信号，EIS系统300也不一定能收到EIS系统300能补偿的全部运动信号，最终实际补偿量与实际运动情况不匹配，整体防抖效果不佳。
本申请实施例中，OIS控制器根据运动传感器采集到的运动数据移动终端设备的镜头，使得图像传感器在采集图像序列时，光路尽可能保持稳定不变，从而得到清晰曝光的图像序列，OIS控制控制镜头的移动可以称为第一次补偿，EIS控制器根据运动数据以及OIS控制器控制镜头的移动信息对图像传感器采集到的图像序列进行抖动补偿，可以称为第二次补偿，避免现有技术OIS控制器根据运动数据对图像序列进行抖动补偿，并且EIS控制器也根据运动数据对图像序列进行抖动补偿，即现有技术采用相同的运动数据对图像序列进行两次补偿，而本申请实施例中，采用EIS技术对图像序列进行第二次补偿时，考虑了OIS技术中的第一次补偿，可以避免现有技术出现过补偿的情况，提高图像的稳定性。
图7示出了本申请实施例提供的获取图像的方法600，终端设备包括运动传感器、光学稳像OIS控制器、电子稳像EIS控制器、镜头和图像传感器，所述方法600包括：
S610，当所述终端设备移动时，所述运动传感器采集所述终端设备的运动数据，并将所述运动数据发送给所述OIS控制器和所述EIS控制器，例如，在每帧曝光期间，运动传感器以3khz以上的频率获取终端设备的运动数据。
S620，所述OIS控制器接收所述运动数据，并根据所述运动数据控制所述终端设备的镜头的移动，例如，OIS控制器以10khz以上的频率推动镜头。
S630，所述图像传感器移动采集图像序列。
应理解，S630可以在根据图像采集周期来采集图像序列。
可选地，OIS控制器利用帧同步信号获取所述运动数据和所述镜头的移动信息；所述OIS控制器将所述运动数据和所述镜头的移动信息发送给所述EIS控制器。帧同步信号可以检测一帧图像曝光的开始和结束，通过帧同步信号可以提取到每帧图像对应的运动数据以及图像传感器在采集每帧图像时镜头的移动信息，即通过帧同步信号可以将每帧图像、每帧图像对应的运动数据、每帧图像对应的镜头的移动信息匹配起来。OIS控制器可以将通过帧同步信号获取到的运动数据和镜头的移动信息发送给EIS控制器，EIS控制器利用匹配好的运动数据和镜头的移动信息对图像序列进行抖动补偿。
作为一个可选实施例，所述终端设备还包括ISP，所述OIS控制器将所述运动数据和所述镜头的移动信息发送给所述EIS控制器，包括：所述OIS控制器将所述运动数据和所述镜头的移动信息通过ISP发送给所述EIS控制器；所述EIS控制器接收所述OIS发送的根据所述帧同步信号获取的所述运动数据和所述镜头的移动信息，包括：所述EIS控制器通过所述ISP接收所述OIS发送的根据所述帧同步信号获取的所述运动数据和所述镜头的移动信息。
作为一个可选实施例，在所述图像传感器根据所述镜头的移动采集图像序列之后，所述方法600还包括：所述图像传感器将采集到的所述图像序列发送给所述ISP；所述ISP接收所述传感器发送的采集到的所述图像序列，将所述图像传感器采集到的所述图像序列发送给所述EIS控制器。
可选地，EIS控制器或者ISP也可以利用帧同步信号获取所述运动数据，EIS控制器或者ISP可以将获取到的运动数据发送给OIS控制器，以便于OIS控制器根据运动数据控制镜头移动；然后EIS控制器可以根据帧同步信号获取运动数据和镜头的移动信息，根据运动数据和镜头的移动信息对图像序列进行抖动补偿。
S640，所述EIS控制器利用所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿。
可选地，所述终端设备包括霍尔传感器，在S620之后，S640之前，方法600还包括：所述霍尔传感器采集所述镜头的移动信息；S640包括：所述EIS控制器利用所述霍尔传感器采集的所述镜头的移动信息、所述运动数据对所述图像传感器采集的所述图像序列进行抖动补偿。
可选地，所述OIS控制器或所述EIS控制器将所述镜头的移动信息转换为镜头移动像素补偿量；其中，所述EIS控制器利用所述霍尔传感器采集的所述镜头的移动信息和所述运动数据对所述图像传感器采集的所述图像序列进行抖动补偿，包括：所述EIS控制器利用所述镜头移动像素补偿量和所述运动数据对所述图像传感器采集的所述图像序列进行抖动补偿。
作为一个例子，所述镜头的移动信息转换为镜头移动像素补偿量可以是：通过霍尔传感器测量出镜头在X，Y方向的移动量分别为x um(微米)和y um(微米)，图像传感器上每个像素尺寸对应的p um，p通常为零点几微米值几微米不等，不同型号的图像传感器像素尺寸不同，则镜头在X轴移动x um和在Y轴移动y um对应的像素补偿量为x/p个像素和y/p个像素。
具体，所述EIS控制器利用所述镜头移动像素补偿量和所述运动数据对所述图像传感器采集的所述图像序列进行抖动补偿，包括：所述EIS控制器根据所述运动数据确定所述图像传感器采集的所述图像序列的运动像素补偿量；所述EIS控制器将所述运动像素补偿量减去所述镜头移动像素补偿量得到图像序列像素补偿量；所述EIS控制器利用所述图像序列像素补偿量对所述图像传感器采集的图像序列进行抖动补偿。例如，OIS控制器控制镜头的移动转化为镜头移动像素补偿量为在X轴方向上移动了x1个像素，在Y轴上移动了y1个像素。EIS控制器根据当前帧以及前后至少一帧图像的运动数据计算出当前帧在X轴上应该补偿x2个像素，在Y轴上应该补偿y2个像素，则EIS控制器最终确定当前帧的在X轴上实际像素补偿量为x2-x1，在Y轴上实际像素补偿量为y2-y1。
作为一个例子，例如EIS计算像素补偿量的方法可以为：假设陀螺仪信号为镜头抖动角速度信号ω，通过检测每帧曝光期间的角速度信号进行积分运算，可以计算出镜头偏转的角度θ，假设镜头的等效焦距为f，那么物体的成像在图像传感器的运动距离为：f·tanθ，假设图像传感器的像素尺寸为p，那么镜头偏转角度引起的图像运动像素量为：(f·tanθ)/p个像素。EIS计算出每帧图像因为镜头抖动导致的图像运动像素量，如第N帧图像抖动n个像素，第N+1帧抖动m个像素，第N-1帧抖动l个像素，那么第N帧图像应该补偿的像素量为f(m,n,1)，f(·)为视频防抖计算函数。
因此，OIS控制器可以根据运动数据确定图像序列的运动像素补偿量，但是在图像序列采集的过程中已经进行了镜头移动，具体镜头移动体现在镜头移动像素补偿量上，因此在EIS控制器进行像素补偿的过程中，需要将镜头移动像素补偿量减掉，这样不会出现过多的补偿，提高图像的稳定性。
上面结合图7描述了本申请实施例的获取图像的方法，下面结合图8和图9描述本申请实施例中终端设备。
图8示出了根据本申请实施例提供的终端设备700示意图，该终端设备700包括：
运动传感器710，用于当所述终端设备移动时，采集所述终端设备的运动数据，并将所述运动数据发送给所述OIS控制器和所述EIS控制器。
光学稳像OIS控制器720，用于根据所述运动数据控制所述终端设备的镜头进行移动。
图像传感器730，用于采集图像序列。
电子稳像EIS控制器740，用于通过所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿。
作为一个可选实施例，所述终端设备700还包括：霍尔传感器750，用于在所述EIS控制器通过所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿之前，采集所述镜头的移动信息，所述EIS控制器330具体用于：通过所述霍尔传感器采集的所述镜头的移动信息和所述运动数据对所述图像传感器采集的所述图像序列进行抖动补偿。
作为一个可选实施例，所述OIS控制器720或所述EIS控制器740还用于：在所述霍尔传感器750采集所述镜头移动的移动信息之后，将所述镜头的移动信息转换为镜头移动像素补偿量；所述EIS控制器740具体还用于：通过所述镜头移动像素补偿量和所述运动数据对所述图像传感器采集的所述图像序列进行抖动补偿。
作为一个可选实施例，所述EIS控制器740具体还用于：根据所述运动数据确定所述图像传感器采集的所述图像序列的运动像素补偿量；将所述运动像素补偿量减去所述镜头移动像素补偿量得到图像序列像素补偿量；利用所述图像序列像素补偿量对所述图像传感器采集的图像序列进行抖动补偿。
作为一个可选实施例，所述OIS控制器720还用于：在所述EIS控制器740利用所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿之前，利用帧同步信号获取所述运动数据和所述镜头的移动信息；将所述运动数据和所述镜头的移动信息发送给所述EIS控制器740；所述EIS控制器740具体还用于：通过所述OIS控制器720发送的根据所述帧同步信号获取的所述运动数据和所述镜头的移动信息对所述图像传感器采集的图像序列进行抖动补偿。
作为一个可选实施例，所述终端设备700还包括：图像信号处理器ISP 760，所述OIS控制器720还用于：将所述运动数据和所述镜头的移动信息通过ISP发送给所述EIS控制器740；所述EIS控制器740具体用于：通过所述ISP接收所述OIS控制器720发送的根据所述帧同步信号获取的所述运动数据和所述镜头的移动信息。
作为一个可选实施例，所述图像传感器730还用于：在采集图像序列之后，将采集到的所述图像序列发送给所述ISP；所述ISP接收所述图像传感器发送的采集到的所述图像序列，将所述图像传感器采集到的所述图像序列发送给所述EIS控制器740。
作为一个可选实施例，所述运动数据包括：所述终端设备在X轴、Y轴和Z轴上的旋转数据，和/或，所述终端设备在X轴和Y轴上的平移数据。
以终端设备为手机为例，图9示出了与本申请实施例相关的手机800的部分结构的框图。如图9所示，手机800可以包括：射频(Radio Frequency，RF)电路810、电源802、处理器830、存储器840、输入单元850、显示单元860、传感器870、音频电路880、OIS控制器820以及无线保真(Wireless Fidelity，简称“WiFi”)模块890等部件。应理解，图8中示出的手机结构并不构成对手机的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。处理器830可以包括EIS控制器830和/或ISP440。
下面结合图9对手机800的各个构成部件进行具体的介绍：
RF电路810可用于收发信息或通话过程中，信号的接收和发送，特别地，将基站的下行信息接收后，给处理器830处理；另外，将设计上行的数据发送给基站。通常，RF电路包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(Low NoiseAmplifier，LNA)、双工器等。此外，RF电路810还可以通过无线通信与网络和其他设备通信。所述无线通信可以使用任一通信标准或协议，包括但不限于全球移动通讯系统(GlobalSystem of Mobile communication，GSM)、通用分组无线服务(General Packet RadioService，GPRS)、码分多址(Code Division Multiple Access，CDMA)、宽带码分多址(Wideband Code Division Multiple Access，WCDMA)、长期演进(Long Term Evolution，LTE)、电子邮件、短消息服务(Short Messaging Service，SMS)等。
存储器840可用于存储软件程序以及模块，处理器830通过运行存储在存储器840的软件程序以及模块，从而执行手机800的各种功能应用以及数据处理。存储器840可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图象播放功能等)等；存储数据区可存储根据手机800的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器840可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
输入单元850可用于接收输入的数字或字符信息，以及产生与手机800的用户设置以及功能控制有关的键信号输入。具体地，输入单元850可包括触控面板851以及其他输入设备852。触控面板851，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板851上或在触控面板851附近的操作)，并根据预先设定的程式驱动相应的连接装置。可选地，触控面板851可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器830，并能接收处理器830发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板851。除了触控面板851，输入单元850还可以包括其他输入设备852。具体地，其他输入设备852可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
显示单元860可用于显示由用户输入的信息或提供给用户的信息以及手机800的各种菜单。显示单元860可包括显示面板861，可选地，可以采用LCD、OLED等形式来配置显示面板861。进一步地，触控面板851可覆盖显示面板861，当触控面板851检测到在其上或附近的触摸操作后，传送给处理器830以确定触摸事件的类型，随后处理器830根据触摸事件的类型在显示面板861上提供相应的视觉输出。虽然在图8中，触控面板851与显示面板851是作为两个独立的部件来实现手机800的输入和输入功能，但是在某些实施例中，可以将触控面板851与显示面板861集成而实现手机800的输入和输出功能。
手机800还可包括至少一种传感器870，比如光传感器、运动传感器410、图像传感器420以及其他传感器。具体地，光传感器可包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板861的亮度，接近传感器可在手机800移动到耳边时，关闭显示面板861和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；至于手机800还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。
音频电路880、扬声器881，麦克风882可提供用户与手机800之间的音频接口。音频电路880可将接收到的音频数据转换后的电信号，传输到扬声器881，由扬声器881转换为声音信号输出；另一方面，麦克风882将收集的声音信号转换为电信号，由音频电路880接收后转换为音频数据，再将音频数据输出至RF电路810以发送给比如另一手机，或者将音频数据输出至存储器840以便进一步处理。
WiFi属于短距离无线传输技术，手机800通过WiFi模块890可以帮助用户收发电子邮件、浏览网页和访问流式媒体等，它为用户提供了无线的宽带互联网访问。虽然图9示出了WiFi模块890，但是可以理解的是，其并不属于手机800的必须构成，完全可以根据需要在不改变发明的本质的范围内而省略。
处理器830是手机800的控制中心，利用各种接口和线路连接整个手机的各个部分，通过运行或执行存储在存储器840内的软件程序和/或模块，以及调用存储在存储器840内的数据，执行手机800的各种功能和处理数据，从而实现基于手机的多种业务。可选地，处理器830可包括一个或多个处理单元；优选的，处理器830可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器830中。
手机800还包括给各个部件供电的电源802(比如电池)，优选的，电源可以通过电源管理系统与处理器830逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗等功能。
尽管未示出，手机800还可以包括摄像头、蓝牙模块等。
应理解，本文中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。
应理解，在本申请的各种实施例中，上述各过程的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本申请实施例的实施过程构成任何限定。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以所述权利要求的保护范围为准。

Claims (14)

1.一种获取图像的方法，其特征在于，所述方法包括：
当终端设备移动时，运动传感器采集所述终端设备的运动数据，并将所述运动数据发送给光学稳像OIS控制器和电子稳像EIS控制器，其中，所述终端设备包括所述运动传感器、所述OIS控制器、所述EIS控制器和图像传感器；
所述OIS控制器根据所述运动数据控制所述终端设备的镜头的移动；
所述图像传感器采集图像序列；
所述EIS控制器利用所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿；
在所述EIS控制器利用所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿之前，所述方法还包括：
所述OIS控制器利用帧同步信号获取所述运动数据和所述镜头的移动信息；
所述OIS控制器将所述运动数据和所述镜头的移动信息发送给所述EIS控制器；
其中，所述EIS控制器利用所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿，包括：
所述EIS控制器利用所述OIS控制器发送的根据所述帧同步信号获取的所述运动数据和所述镜头的移动信息对所述图像传感器采集的图像序列进行抖动补偿。
2.根据权利要求1所述的方法，其特征在于，所述终端设备还包括霍尔传感器，在所述EIS控制器利用所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿之前，所述方法还包括：
所述霍尔传感器采集所述镜头的移动信息；
其中，所述EIS控制器利用所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿，包括：
所述EIS控制器利用所述霍尔传感器采集的所述镜头的移动信息和所述运动数据对所述图像传感器采集的所述图像序列进行抖动补偿。
3.根据权利要求2所述的方法，其特征在于，在所述霍尔传感器采集所述镜头移动的移动信息之后，所述方法还包括：
所述OIS控制器或所述EIS控制器将所述镜头的移动信息转换为镜头移动像素补偿量；
其中，所述EIS控制器利用所述霍尔传感器采集的所述镜头的移动信息、所述运动数据对所述图像传感器采集的所述图像序列进行抖动补偿，包括：
所述EIS控制器利用所述镜头移动像素补偿量和所述运动数据对所述图像传感器采集的所述图像序列进行抖动补偿。
4.根据权利要求3所述的方法，其特征在于，所述EIS控制器利用所述镜头移动像素补偿量和所述运动数据对所述图像传感器采集的所述图像序列进行抖动补偿，包括：
所述EIS控制器根据所述运动数据确定所述图像传感器采集的所述图像序列的运动像素补偿量；
所述EIS控制器将所述运动像素补偿量减去所述镜头移动像素补偿量得到图像序列像素补偿量；
所述EIS控制器利用所述图像序列像素补偿量对所述图像传感器采集的图像序列进行抖动补偿。
5.根据权利要求4所述的方法，其特征在于，所述终端设备还包括：图像信号处理器ISP，所述OIS控制器将所述运动数据和所述镜头的移动信息发送给所述EIS控制器，包括：
所述OIS控制器将所述运动数据和所述镜头的移动信息通过ISP发送给所述EIS；
所述EIS控制器接收所述OIS控制器发送的根据所述帧同步信号获取的所述运动数据和所述镜头的移动信息，包括：
所述EIS控制器通过所述ISP接收所述OIS控制器发送的根据所述帧同步信号获取的所述运动数据和所述镜头的移动信息。
6.根据权利要求5所述的方法，其特征在于，在所述图像传感器采集图像序列之后，所述方法还包括：
所述图像传感器将采集到的所述图像序列发送给所述ISP；
所述ISP接收所述传感器发送的采集到的所述图像序列，将所述图像传感器采集到的所述图像序列发送给所述EIS控制器。
7.根据权利要求1至6中任一项所述的方法，所述运动数据包括：
所述终端设备在X轴、Y轴和Z轴上的旋转数据，和/或，所述终端设备在X轴和Y轴上的平移数据。
8.一种终端设备，其特征在于，所述终端设备包括：
运动传感器，用于当所述终端设备移动时，采集所述终端设备的运动数据，并将所述运动数据发送给OIS控制器和EIS控制器；
光学稳像OIS控制器，用于根据所述运动数据控制所述终端设备的镜头的移动；
图像传感器，用于采集图像序列；
电子稳像EIS控制器，用于通过所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿；
所述OIS控制器还用于：
在所述EIS控制器利用所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿之前，利用帧同步信号获取所述运动数据和所述镜头的移动信息；
将所述运动数据和所述镜头的移动信息发送给所述EIS控制器；
所述EIS控制器具体还用于：通过所述OIS控制器发送的根据所述帧同步信号获取的所述运动数据和所述镜头的移动信息对所述图像传感器采集的图像序列进行抖动补偿。
9.根据权利要求8所述的终端设备，其特征在于，所述终端设备还包括：
霍尔传感器，用于在所述EIS控制器通过所述镜头的移动信息和所述运动数据对所述图像传感器采集的图像序列进行抖动补偿之前，采集所述镜头的移动信息；
所述EIS控制器具体用于：通过所述霍尔传感器采集的所述镜头的移动信息和所述运动数据对所述图像传感器采集的所述图像序列进行抖动补偿。
10.根据权利要求9所述的终端设备，其特征在于，所述OIS控制器或所述EIS控制器还用于：
在所述霍尔传感器采集所述镜头移动的移动信息之后，将所述镜头的移动信息转换为镜头移动像素补偿量；
所述EIS控制器具体还用于：通过所述镜头移动像素补偿量和所述运动数据对所述图像传感器采集的所述图像序列进行抖动补偿。
11.根据权利要求10所述的终端设备，其特征在于，所述EIS控制器具体还用于：
根据所述运动数据确定所述图像传感器采集的所述图像序列的运动像素补偿量；
将所述运动像素补偿量减去所述镜头移动像素补偿量得到图像序列像素补偿量；
利用所述图像序列像素补偿量对所述图像传感器采集的图像序列进行抖动补偿。
12.根据权利要求11所述的终端设备，其特征在于，所述终端设备还包括：图像信号处理器ISP，
所述OIS控制器还用于：将所述运动数据和所述镜头的移动信息通过ISP发送给所述EIS控制器；
所述EIS控制器具体用于：通过所述ISP接收所述OIS控制器发送的根据所述帧同步信号获取的所述运动数据和所述镜头的移动信息。
13.根据权利要求12所述的终端设备，其特征在于，所述图像传感器还用于：
在采集图像序列之后，将采集到的所述图像序列发送给所述ISP；
所述ISP接收所述图像传感器发送的采集到的所述图像序列，将所述图像传感器采集到的所述图像序列发送给所述EIS控制器。
14.根据权利要求8至13中任一项所述的终端设备，所述运动数据包括：
所述终端设备在X轴、Y轴和Z轴上的旋转数据，和/或，所述终端设备在X轴和Y轴上的平移数据。
CN201780003148.2A 2016-10-17 2017-01-12 获取图像的方法和终端设备 Active CN108353131B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201610903424 2016-10-17
CN2016109034248 2016-10-17
PCT/CN2017/070995 WO2018072353A1 (zh) 2016-10-17 2017-01-12 获取图像的方法和终端设备

Publications (2)

Publication Number Publication Date
CN108353131A CN108353131A (zh) 2018-07-31
CN108353131B true CN108353131B (zh) 2021-05-04

Family

ID=62018207

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780003148.2A Active CN108353131B (zh) 2016-10-17 2017-01-12 获取图像的方法和终端设备

Country Status (4)

Country Link
US (1) US11057565B2 (zh)
EP (1) EP3522519B1 (zh)
CN (1) CN108353131B (zh)
WO (1) WO2018072353A1 (zh)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102573302B1 (ko) * 2018-10-10 2023-08-31 삼성전자 주식회사 영상의 안정화를 위한 카메라 모듈, 그것을 포함하는 전자 장치 및 전자 장치의 영상 안정화 방법
CN109089033A (zh) * 2018-10-22 2018-12-25 惠州市桑莱士智能科技股份有限公司 摄像头模组
CN109729264B (zh) * 2018-12-11 2021-01-08 维沃移动通信有限公司 一种图像获取方法及移动终端
CN111355872B (zh) * 2018-12-24 2021-09-07 华为技术有限公司 摄像模组、防抖组件及终端
CN111711756A (zh) * 2020-06-28 2020-09-25 Oppo广东移动通信有限公司 一种图像防抖方法、电子设备及存储介质
CN112135051A (zh) * 2020-09-24 2020-12-25 维沃移动通信有限公司 防抖控制方法及装置
CN112333390B (zh) * 2020-10-29 2022-02-22 维沃移动通信有限公司 摄像头模组、摄像头模组的控制方法、装置及电子设备
CN114755789B (zh) * 2020-12-28 2023-07-04 北京小米移动软件有限公司 对焦方法、装置、终端及存储介质
EP4272423A1 (en) * 2021-01-04 2023-11-08 Qualcomm Incorporated Integrated visual-inertial odometry and image stabilization for image processing
CN113327202A (zh) * 2021-03-30 2021-08-31 苏州微清医疗器械有限公司 一种图像畸变的矫正方法及其应用
WO2022233289A1 (zh) * 2021-05-07 2022-11-10 宁波舜宇光电信息有限公司 摄像模组、光学致动器、感光组件及其制造方法
CN113572929B (zh) * 2021-07-09 2023-06-16 Oppo广东移动通信有限公司 图像处理方法、装置、电子设备及存储介质
CN113473027B (zh) * 2021-07-09 2023-09-05 Oppo广东移动通信有限公司 图像处理方法、电子设备和存储介质
CN113472991B (zh) * 2021-07-09 2023-04-25 Oppo广东移动通信有限公司 控制方法、控制装置、摄像头组件、电子设备和介质
CN113489880B (zh) * 2021-07-29 2024-05-28 Oppo广东移动通信有限公司 电子设备、信息同步方法和计算机可读存储介质
CN113489879A (zh) * 2021-07-29 2021-10-08 Oppo广东移动通信有限公司 信息同步方法、电子设备和计算机可读存储介质
EP4280615A4 (en) * 2021-07-30 2024-08-14 Honor Device Co Ltd IMAGE ANTI-SHAKE METHOD AND ELECTRONIC DEVICE
CN113703900A (zh) * 2021-08-31 2021-11-26 平安国际智慧城市科技股份有限公司 基于深度学习的程序界面防抖方法、装置、设备及介质
EP4277293A4 (en) * 2022-03-08 2024-06-12 Samsung Electronics Co., Ltd. ELECTRONIC DEVICE FOR IMAGE STABILIZATION AND OPERATING METHOD THEREFOR
CN115022540B (zh) * 2022-05-30 2024-06-25 Oppo广东移动通信有限公司 防抖控制方法、装置及系统、电子设备
WO2024050829A1 (en) * 2022-09-09 2024-03-14 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Anti-shake system and image stabilization method
CN116320784B (zh) * 2022-10-27 2023-11-28 荣耀终端有限公司 图像处理方法及装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101345824A (zh) * 2007-07-09 2009-01-14 三星电子株式会社 补偿相机的手抖动的方法和设备
CN102082910A (zh) * 2009-12-01 2011-06-01 索尼公司 图像拍摄设备、图像拍摄方法以及图像拍摄程序
CN103167237A (zh) * 2011-12-14 2013-06-19 Jvc建伍株式会社 摄像装置以及图像抖动修正方法
CN104349059A (zh) * 2013-08-01 2015-02-11 佳能株式会社 图像抖动校正设备及其控制方法、镜筒、光学设备和摄像设备
CN105611166A (zh) * 2015-12-29 2016-05-25 努比亚技术有限公司 一种实现图片拍摄的方法及终端

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE69423430T2 (de) 1993-12-02 2000-09-07 Canon K.K., Tokio/Tokyo Vorrichtung zur Bildzitterkorrektur
EP1102107B1 (en) * 1999-11-16 2008-01-09 Fujinon Corporation Vibration isolator
JP2001197357A (ja) * 2000-01-12 2001-07-19 Hitachi Ltd 撮像装置
JP2004239962A (ja) 2003-02-03 2004-08-26 Nikon Corp ブレ補正カメラシステム、ブレ補正カメラ、画像回復装置及びブレ補正プログラム
JP4367063B2 (ja) * 2003-09-16 2009-11-18 フジノン株式会社 防振用コントローラ
JP4596268B2 (ja) 2006-02-14 2010-12-08 ソニー株式会社 撮像装置
KR101023946B1 (ko) 2007-11-02 2011-03-28 주식회사 코아로직 객체 추적을 이용한 디지털 영상의 손떨림 보정 장치 및방법
JP5121674B2 (ja) * 2008-11-04 2013-01-16 キヤノン株式会社 撮像装置
KR101630297B1 (ko) * 2009-12-03 2016-06-14 삼성전자주식회사 손떨림 보정 방법 및 장치
JP5003769B2 (ja) 2010-01-18 2012-08-15 株式会社Ｊｖｃケンウッド 撮像装置および画像振れ補正方法
JP5848603B2 (ja) * 2011-12-27 2016-01-27 キヤノン株式会社 撮像装置及びその制御方法
KR102179731B1 (ko) 2013-03-29 2020-11-17 소니 주식회사 촬상 장치, 고체 촬상 소자, 카메라 모듈, 전자 기기, 및 촬상 방법
US9232138B1 (en) 2013-06-03 2016-01-05 Amazon Technologies, Inc. Image stabilization techniques
JP5914763B2 (ja) * 2013-08-01 2016-05-18 富士フイルム株式会社 撮像モジュール及び電子機器並びに撮像モジュールの製造方法
KR20160085300A (ko) * 2013-12-11 2016-07-15 아사히 가세이 일렉트로닉스 가부시끼가이샤 손떨림 보정 장치 및 그 조정 방법, 손떨림 보정 회로 및 손떨림 보정 방법과, 카메라 모듈 및 그 광학 요소의 위치 제어 방법
JP6530602B2 (ja) * 2014-12-22 2019-06-12 キヤノン株式会社 撮像装置及びその制御方法
CN104967785B (zh) * 2015-07-07 2018-04-27 小米科技有限责任公司 控制光学防抖的方法及装置
JP6674701B2 (ja) * 2016-09-28 2020-04-01 ルネサスエレクトロニクス株式会社 画像処理モジュール、および半導体システム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101345824A (zh) * 2007-07-09 2009-01-14 三星电子株式会社 补偿相机的手抖动的方法和设备
CN102082910A (zh) * 2009-12-01 2011-06-01 索尼公司 图像拍摄设备、图像拍摄方法以及图像拍摄程序
CN103167237A (zh) * 2011-12-14 2013-06-19 Jvc建伍株式会社 摄像装置以及图像抖动修正方法
CN104349059A (zh) * 2013-08-01 2015-02-11 佳能株式会社 图像抖动校正设备及其控制方法、镜筒、光学设备和摄像设备
CN105611166A (zh) * 2015-12-29 2016-05-25 努比亚技术有限公司 一种实现图片拍摄的方法及终端

Also Published As

Publication number Publication date
EP3522519A1 (en) 2019-08-07
CN108353131A (zh) 2018-07-31
US11057565B2 (en) 2021-07-06
WO2018072353A1 (zh) 2018-04-26
EP3522519A4 (en) 2019-09-18
EP3522519B1 (en) 2022-11-30
US20190260934A1 (en) 2019-08-22

Similar Documents

Publication Publication Date Title
CN108353131B (zh) 获取图像的方法和终端设备
CN108605099B (zh) 用于终端拍照的方法及终端
CN108737735B (zh) 图像校正方法、电子设备及计算机可读存储介质
JP4479679B2 (ja) 撮影画像表示システム、画像受信装置及びその制御方法
WO2019091486A1 (zh) 拍照处理的方法、装置、终端和存储介质
CN110731077B (zh) 视频图像防抖方法和终端
EP3627823B1 (en) Image selection method and related product
CN107948530B (zh) 一种图像处理方法、终端及计算机可读存储介质
WO2011071917A1 (en) Face detection as a metric to stabilize video during video chat session
CN108924414B (zh) 一种拍摄方法及终端设备
JP6171116B2 (ja) 撮像装置、フリッカ検出方法、及びフリッカ検出プログラム
CN111885307B (zh) 一种景深拍摄方法、设备及计算机可读存储介质
CN108171744A (zh) 一种双目虚化中视差图的确定方法、移动终端及存储介质
CN112188082A (zh) 高动态范围图像拍摄方法、拍摄装置、终端及存储介质
CN109120858B (zh) 一种图像拍摄方法、装置、设备及存储介质
CN111601032A (zh) 一种拍摄方法、装置及电子设备
CN108111767B (zh) 一种拍摄方法、终端及计算机可读存储介质
CN111447371A (zh) 一种自动曝光控制方法、终端及计算机可读存储介质
CN108848321B (zh) 曝光优化方法、装置及计算机可读存储介质
CN108234978B (zh) 一种图像处理方法及移动终端
CN213279878U (zh) 摄像装置及移动终端
CN107395971B (zh) 一种图像采集方法、设备和计算机可读存储介质
JP6374535B2 (ja) 操作装置、追尾システム、操作方法、及びプログラム
CN112135045A (zh) 一种视频处理方法、移动终端以及计算机存储介质
CN112822548B (zh) 一种投屏显示方法及装置、移动终端、存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant