CN111212222A - 图像处理方法、装置、电子装置及存储介质 - Google Patents
图像处理方法、装置、电子装置及存储介质 Download PDFInfo
- Publication number
- CN111212222A CN111212222A CN202010021644.4A CN202010021644A CN111212222A CN 111212222 A CN111212222 A CN 111212222A CN 202010021644 A CN202010021644 A CN 202010021644A CN 111212222 A CN111212222 A CN 111212222A
- Authority
- CN
- China
- Prior art keywords
- frame image
- image
- current frame
- gyroscope
- determining
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 36
- 238000005192 partition Methods 0.000 claims description 39
- 238000004590 computer program Methods 0.000 claims description 11
- 230000006641 stabilisation Effects 0.000 claims description 10
- 238000011105 stabilization Methods 0.000 claims description 10
- 238000000638 solvent extraction Methods 0.000 claims description 7
- 230000008859 change Effects 0.000 claims description 3
- 230000011218 segmentation Effects 0.000 claims description 3
- 238000000034 method Methods 0.000 abstract description 22
- 238000010586 diagram Methods 0.000 description 10
- 230000008569 process Effects 0.000 description 6
- 230000006870 function Effects 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000006073 displacement reaction Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 230000001788 irregular Effects 0.000 description 2
- PEDCQBHIVMGVHV-UHFFFAOYSA-N Glycerine Chemical compound OCC(O)CO PEDCQBHIVMGVHV-UHFFFAOYSA-N 0.000 description 1
- 230000001276 controlling effect Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000000875 corresponding effect Effects 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/683—Vibration or motion blur correction performed by a processor, e.g. controlling the readout of an image memory
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6812—Motion detection based on additional sensors, e.g. acceleration sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/12—Edge-based segmentation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
- H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Human Computer Interaction (AREA)
- Studio Devices (AREA)
Abstract
本申请提供了一种图像处理方法、装置、电子装置及存储介质,方法包括:获取摄像头拍摄的当前帧图像以及拍摄当前帧图像时陀螺仪的运动参数,确定当前帧图像的感兴趣区域,利用当前帧图像的感兴趣区域与陀螺仪的运动参数确定下一帧图像的显示区域并对下一帧图像的显示区域部分进行显示;本方法在拍摄时,确定前一帧图像的感兴趣区域以及在拍摄前一帧图像时陀螺仪的运动状态,根据前一帧图像的感兴趣区域以及陀螺仪的运动状态确定后一帧显示图像显示区域;后一帧图像显示区域不再固定为视场中心,而是根据前一帧图像的感兴趣区域以及陀螺仪的运动状态进行调整,从而方便对物体进行追踪。
Description
技术领域
本申请涉及图像处理技术领域,尤其涉及一种图像处理方法、装置、电子装置及存储介质。
背景技术
随着智能手机使用的普及,人们对智能手机摄像头的拍摄功能的要求也在逐渐变高。目前随着智能手机摄像头的变焦倍数不断增大,摄像头在高倍放大下拍摄的视角极小。在高倍放大的情况下拍摄视频时,摄像头若出现轻微晃动,就会导致显示画面出现大幅度移动,进而导致很难固定追踪某个物体。
发明内容
为解决上述视频拍摄在高倍放大的情况下视角极小,出现轻微晃动就会导致显示画面大幅移动,从而导致很难固定追踪某个物体的技术问题,本申请实施例提供了一种图像处理方法、装置、电子装置及存储介质。
本申请实施例第一方面提供了一种图像处理方法,方法包括:
获取摄像头拍摄的当前帧图像以及拍摄所述当前帧图像时陀螺仪的运动参数;
确定所述当前帧图像的感兴趣区域;
利用所述感兴趣区域与所述陀螺仪的运动参数确定下一帧图像的显示区域并对所述下一帧图像的显示区域部分进行显示。
本申请实施例第二方面提供了一种图像处理装置,装置包括:
获取模块,用于获取摄像头拍摄的当前帧图像以及拍摄所述当前帧图像时陀螺仪的运动参数;
感兴趣区域确定模块,用于确定所述当前帧图像的感兴趣区域;
显示区域确定模块,用于利用所述感兴趣区域与所述陀螺仪的运动参数确定下一帧图像的显示区域并对所述下一帧图像的显示区域部分进行显示。
本申请实施例第三方面提供了一种电子装置,包括:存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时,实现上述本申请实施例第一方面提供的图像处理方法中的各步骤。
本申请实施例第四方面提供了一种存储介质,其上存储有计算机程序,计算机程序被处理器执行时,实现上述本申请实施例第一方面提供的处理方法中的各步骤。
由上可见,本申请实施例提供的图像处理方法,方法包括:获取摄像头拍摄的当前帧图像以及拍摄当前帧图像时陀螺仪的运动参数,确定当前帧图像的感兴趣区域,利用当前帧图像的感兴趣区域与陀螺仪的运动参数确定下一帧图像的显示区域并对下一帧图像的显示区域部分进行显示。本方法在拍摄时,确定前一帧图像的感兴趣区域以及在拍摄前一帧图像时陀螺仪的运动状态,根据前一帧图像的感兴趣区域以及陀螺仪的运动状态确定后一帧显示图像。由于后一帧显示图像不再固定为视场中心,而是根据前一帧图像的感兴趣区域以及陀螺仪的运动状态进行调整,进而相对容易对特定物体进行追踪。
附图说明
图1为一种电子设备的结构框图;
图2a为数码变焦的裁剪示意图;
图2b为裁剪出的裁剪区的示意图;
图2c为裁剪区放大后的示意图;
图3为本申请实施例提供的图像处理方法的流程示意图;
图4为本申请实施例提供的图像处理方法的另一流程示意图;
图5为本申请实施例提供的图像处理装置的结构示意图;
图6为本申请实施例提供的电子装置的结构示意图。
具体实施方式
为使得本申请的发明目的、特征、优点能够更加的明显和易懂,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而非全部实施例。基于本申请中的实施例,本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
图1示出了一种电子设备的结构框图。本申请实施例提供的图像处理方法可应用于如图1所示的电子设备10中,电子设备10可以但不限于包括:需要依靠电池维持正常运行且支持拍摄以及显示功能的智能手机、平板电脑、智能相机以及穿戴智能设备等。
如图1所示,电子设备10包括存储器101、存储控制器102、一个或多个(图中仅示出一个)处理器103、图像拍摄控制组件104以及一个或多个(图中仅示出一个)摄像头105。这些组件通过一条或多条通讯总线/信号线106相互通讯。
可以理解,图1所示的结构仅为示意,其并不对电子设备的结构造成限定。电子设备10还可以包括比图1所示更多或者更少的组件,或者具有与图1所示不同的配置。图1所示的各组件可以采用硬件、软件或者其组合实现。
存储器101可用于存储软件程序以及模块,如本申请实施例中的图像处理方法与装置对应的指令以及模块,处理器103通过运行存储在存储器101内的软件程序以及模块,从而执行各种功能应用以及数据处理,即实现上述图像的处理方法以及装置中各模块的功能。
存储器101可包括高速随机存储器,还可以包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实施例中,存储器101可进一步包括相对于处理器103远程设置的存储器,这些远程存储器可以通过网络连接至电子设备10。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。处理器103以及其他可能的组件对存储器101的访问可在存储控制器102的控制下进行。
图像拍摄控制组件104用于控制摄像头进行拍摄并将拍摄的图像数据通过通讯信号线106传输至存储器101或处理器103。摄像头105用于拍摄图像或视频,可以是一个或多个摄像头。
在摄像头105进行图像拍摄时,当摄像头的变焦倍数不断变大达到一定的变焦倍数后,摄像头开始采用数码变焦。数码变焦放大的原理是将视场中心的图像中的每个像素面积增大,如同使用图像处理软件把图片的面积按一定比例改大,再从放大后的图片中裁剪出与原图尺寸相同且中心与原图处于同一中心的图片进行展示。如图2a所示,为数码变焦的原理的裁剪示意图。原图尺寸为长为A、宽为B的矩形,假定摄像头的变焦倍数为k,则从原图中裁剪出长为A/k,宽为B/k的矩形,目前数码变焦裁剪区的中心与原图中心为同一点。如图2b所示,为裁剪出的裁剪区的示意图,裁剪区为长为A/k,宽为B/k的矩形。如图2c所示,为裁剪区放大k倍后的示意图,也是显示在显示器中的显示图。数码放大的原理即将图2b裁剪区图像放大成图2c显示图图像。
由于目前数码变焦裁剪区的中心与原图中心为同一点,即显示图的中心处于摄像头视场的中心。在高倍放大的情况下,当摄像头存在轻微抖动时,摄像头的视场也会随之发生较大幅度的移动,显示画面也会随着视场的移动发生较大的移动,导致很难追踪某个物体。
鉴于此,基于上述电子设备10,为了解决上述在这类电子设备中拍摄时,在高倍放大的情况下出现轻微晃动就导致显示画面出现大幅移动进而导致很难固定追踪某个物体的技术问题。本申请实施例提供一种图像处理方法,如图3所示,为本申请实施例提供的图像处理方法的流程示意图,方法包括:
步骤301,获取摄像头拍摄的当前帧图像以及拍摄当前帧图像时陀螺仪的运动参数;
在本申请实施例中,设备在拍摄的过程中,提取摄像头拍摄的当前一帧的图像,并获取拍摄该被提取图像时陀螺仪的运动参数。陀螺仪的运动参数反应了摄像头的运动情况,即在拍摄时摄像头的抖动幅度,陀螺仪的运动参数包括三维空间坐标轴三个轴向的数据。
步骤302,根据当前帧图像确定当前帧图像的感兴趣区域;
在本申请实施例中,对提取的当前一帧图像进行图像处理,图像处理可以是设备处理器按照预设的处理算法进行自动处理,也可以根据用户的喜好进行指定性处理。图像经处理后得到图像的感兴趣区域。
步骤303,利用图像的感兴趣区域与陀螺仪的运动参数确定下一帧图像的显示区域并对下一帧图像的显示区域部分进行显示。
在本申请实施例中,步骤302中当前一帧图像经处理后得到图像的感兴趣区域,该感兴趣区域为拍摄重点。根据该拍摄重点的位置以及陀螺仪的运动参数,对下一帧图像的显示区域进行调整,并对下一帧图像的显示区域部分进行显示。
本申请实施例提供的图像处理方法,方法包括:获取摄像头拍摄的当前帧图像以及拍摄当前帧图像时陀螺仪的运动参数,根据当前帧图像确定当前帧图像的感兴趣区域,利用当前帧图像的感兴趣区域与陀螺仪的运动参数确定下一帧图像的显示区域并对下一帧图像的显示区域部分进行显示。相对于目前对视场中心进行显示,高倍放大下摄像头轻微抖动时显示区域随着摄像头视场发生较大幅度的移动,该方法的显示区域根据前一帧图像的感兴趣区域以及陀螺仪运动参数进行调整,从而更容易对感兴趣区域的物体进行追踪。
如图4所示,为本申请实施例提供的图像处理方法的另一流程示意图,方法包括:
步骤401,获取摄像头的变焦倍数;
在本申请实施例中,可以理解的是,摄像头的变焦具有光学变焦和数码变焦,在摄像头的放大倍数较小时,摄像头多采用光学变焦。但变焦倍数达到一定的放大倍数时,再采用数码变焦,光学变焦的原理与数码变焦原理不同。在实际拍摄的过程中,先对摄像头的变焦倍数进行确定,获取到摄像头的变焦倍数再进行进一步处理。
步骤402,当所述变焦倍数大于预设的变焦倍数时,获取陀螺仪的稳定时间;
在本申请实施例中,由于当摄像头存在较大幅度的移动时,此时摄像头视场不稳定,可判定用户并未对某个特定物体进行追踪拍摄。因此在执行本申请提供的图像处理方法前,先确定摄像头的运动状态是否稳定。摄像头的运动状态可以通过陀螺仪的运动状态进行确定。因此当摄像头的变焦倍数大于预设的变焦倍数时,即摄像头处于数码变焦的状态时,对陀螺仪的稳定时间进行获取。
步骤403,当所述陀螺仪的稳定时间达到预设的时间时,获取摄像头拍摄的当前帧图像以及拍摄所述当前帧图像时陀螺仪的运动参数。
在本申请实施例中,当陀螺仪的稳定时间达到预设的时间时,可以判定摄像头处于基本稳定的状态,没有太大幅度的运动。此时再获取摄像头拍摄的图像以及拍摄图像时陀螺仪的运动参数。
步骤404,根据当前帧图像确定当前帧图像的感兴趣区域;
步骤405,利用图像的感兴趣区域与陀螺仪的运动参数确定下一帧图像的显示区域并对下一帧图像的显示区域部分进行显示。
可以理解的是,步骤404与步骤405与图3实施例中的步骤302以及步骤303相同,此处不再赘述。
其中获取陀螺仪的稳定时间,包括:
持续获取陀螺仪的运动参数;
根据陀螺仪的运动参数变化确定陀螺仪的运动量;
当陀螺仪的运动量小于预设的运动量时,获取陀螺仪运动量小于预设运动量的保持时间;
保持时间为陀螺仪的稳定时间。
在本申请实施例中,当确定摄像头的变焦倍数大于预设的变焦倍数,摄像头处于数码变焦后。对陀螺仪的运动参数进行持续获取,获取到陀螺仪的运动参数后对持续获取的运动参数进行分析。根据陀螺仪的运动参数在三个坐标轴上的值的变化,可以计算出陀螺仪的运动量,该运动量包括陀螺仪移动的位移以及移动的速度。当陀螺仪的运动量小于预设的运动量时,则判定陀螺仪稳定,即摄像头的状态稳定,可以判定此时用户在针对追踪的物体进行拍摄。从确定陀螺仪稳定时开始计时,持续计算陀螺仪的运动量,并持续记录陀螺仪运动量小于预设运动量的保持时间。这个保持时间即为陀螺仪的稳定时间。
可以理解的是,陀螺仪的稳定时间并非一个固定的值,而是一个持续增长的值。当陀螺仪的稳定时间持续增长达到预设的时间时,开始获取摄像头拍摄的当前帧图像以及拍摄当前帧图像时陀螺仪运动参数。若陀螺仪稳定时长未达到预设的时间,陀螺仪的运动量又超出了预设的运动量,则继续获取陀螺仪的运动量,直到陀螺仪的运动量重新小于预设的运动量时再次记录陀螺仪的稳定时间。而且,在陀螺仪的稳定时间达到预设的时间,开始执行步骤403、步骤404以及步骤405的过程中,仍对陀螺仪的运动参数进行持续的获取,以及持续监控陀螺仪的运动量。当检测到陀螺仪的运动量大于预设的运动量时,则停止当前执行操作,重新对陀螺仪的稳定性进行评估。
进一步地,根据当前帧图像确定当前帧图像的感兴趣区域,包括:
将当前帧图像进行分区;
确定当前帧图像各分区的置信度;
根据当前帧图像的置信度确定当前帧图像的感兴趣区域。
在本申请实施例中,将提取的当前帧图像划分为多个分区,再依据一定的算法对划分得到的多个分区进行置信度评估,确定各分区的置信度。最后根据各分区的置信度确定当前帧图像的感兴趣区域。可以设置感兴趣区域为置信度最高的一个或多个分区。当然,可以理解的是,也可以结合根据用户指定和置信度评估结果综合确定当前帧图像的感兴趣区域。
进一步地,将当前帧图像进行分区,包括:
将当前帧图像进行边缘分割,提取边缘;
根据提取的边缘将当前帧图像进行分区。
在本申请实施例中,对当前帧图像进行分区采用边缘分割方法。首先由边缘检测算子找到当前帧图像的边缘,这些边缘标示出了当前帧图像在灰度、彩色、纹理等方面不连续的位置。提取出边缘后对提取的边缘进行处理时期合并为边缘链,根据边缘链将图像进行分割。分割得到的分区可以是规则的图形,也可以是不规则的图形。
进一步地,确定当前帧图像各分区的置信度,包括:
获取所述当前帧图像各分区的尺寸大小;
根据所述当前帧图像各分区的图像内容、位置以及在所述当前帧图像中出现的次数确定所述当前帧图像各分区的权重;
利用所述各分区的尺寸大小以及所述各分区的权重确定所述当前帧图像各分区的置信度。
在本申请实施例中,首先对分割得到的各分区的尺寸大小进行确定,这里尺寸大小可以是图像各分区的面积大小。图像各分区的面积大小可以通过规则图形的面积计算公式得到,也可以通过图像各分区的像素量累计计算得到。确定了图像各分区的尺寸大小之后,根据各分区的图像内容、位置以及在当前帧图像中出现的次数确定当前帧图像各分区的权重。例如,对于人脸、月亮、文字等特定的目标,可以设置其权重为高;对于位于画面中心的物体,可以设置其权重为中;对于其他多次出现的目标,可以设置权重为低。可以理解的是,权重设置可根据用户的需求或使用习惯进行设置,此处示例不作限制。用户不仅可以将特定的对象的权重进行分档,还可以设定一定的规则计算出各分区的权重值。
确定了各分区的尺寸大小及权重后,根据分区的尺寸大小以及分区的权重计算出各分区的置信度。可以是利用各分区的尺寸大小以及分区权重的乘积确定分区的置信度。可以理解的是,为降低运算量,提高系统的运算效率,可以对分区的尺寸大小进行一定的筛选,对于满足尺寸要求的分区进行权重以及置信度计算。对于尺寸过小或尺寸过大、明确不可作为感兴趣区域的分区,可以提前进行剔除。
进一步地,利用当前帧图像的感兴趣区域与拍摄当前帧图像时陀螺仪的运动参数确定下一帧图像的显示区域,包括:
根据感兴趣区域确定包含感兴趣区域的最小矩形框;
确定最小矩形框的中心;
根据陀螺仪的运动参数将当前帧图像中心向矩形框中心移动得到下一帧图像的显示区域中心。
在本申请实施例中,感兴趣区域可能是一个或多个当前帧图像的分区,这些分区可能是规则图形,也可能是不规则图形。根据这些组成感兴趣区域的图形,确定一个可以包含所有组成感兴趣区域分区的最小矩形框。该最小矩形框以恰好包含感兴趣区域的上、下、左、右为准。确定该最小矩形框的中心,该最小矩形框的中心就是感兴趣区域中心。根据拍摄当前帧图像时陀螺仪的运动参数,可以计算得到该运动参数在当前帧图像平面上的位移量。将当前帧图像的中心向感兴趣区域的中心移动X个像素得到新的中心点,该中心点作为下一帧图像的显示区域的中心点。其中X的值与陀螺仪的运动参数在当前帧图像平面上的位移量成正相关。
结合前文图2a~2c揭示的数码变焦原理进行理解,本方法将下一帧图像的剪裁区域(即显示区域)中心向感兴趣区域中心移动了X个像素。显示区域中心不再固定在摄像头视场的中心,而是依据陀螺仪的运动量向感兴趣区域中心进行调整,以缩小显示区域与感兴趣区域之间的运动量,从而使得拍摄时预览画面相对追踪物体更为稳定。
可以理解的是,该图像处理方法并非仅对单帧图像进行处理。文中的下一帧图像还可以作为下一处理操作中的当前帧图像对其再下一帧图像进行处理,从而即实现图像的连续处理。另外,由于在该图像处理过程中陀螺仪处于相对稳定的状态,摄像头视场的运动量较小,图像的处理也可以不进行连续取帧处理,而是隔N帧进行一次取帧处理。例如,提取摄像头拍摄的第一帧图像、第六帧图像、第十一帧图像以此类推,根据第一帧图像确定提取的第六帧图像的显示区域并显示,再根据提取的第六帧图像确定第十一帧图像的显示区域并显示。如此,可以降低设备处理器的功耗。
另一方面,对图像的处理可以是对提取出的图像直接进行处理,也可以将图像缩小M倍后再进行处理,同样地,该方法可以降低设备处理器的功耗,提升处理效率。
请参阅图5,为本申请实施例提供的图像处理装置的结构示意图,装置包括:
获取模块501,用于获取摄像头拍摄的当前帧图像以及拍摄当前帧图像时陀螺仪的运动参数。
感兴趣区域确定模块502,用于根据当前帧图像确定当前帧图像的感兴趣区域。
显示区域确定模块503,用于利用感兴趣区域与陀螺仪运动参数确定下一帧图像的显示区域并对下一帧图像的显示区域部分进行显示。
在本申请实施例中,可以理解的是,本申请提供的图像显示装置的各模块的功能与图3实施例提供的图像处理方法中的各步骤内容相同,此处不再予以赘述。
请参阅图6,图6为本申请实施例提供的一种电子装置。该电子装置可用于实现前述实施例中的图像处理方法。如图6所示,该电子装置主要包括:
存储器601、处理器602、总线603及存储在存储器601上并可在处理器602上运行的计算机程序,存储器601和处理器602通过总线603连接。处理器602执行该计算机程序时,实现前述实施例中的图像处理方法。其中,处理器的数量可以是一个或多个。
存储器601可以是高速随机存取记忆体(RAM,Random Access Memory)存储器,也可为非不稳定的存储器(non-volatile memory),例如磁盘存储器。存储器601用于存储可执行程序代码,处理器602与存储器601耦合。
进一步的,本申请实施例还提供了一种存储介质,该存储介质可以是设置于上述各实施例中的电子装置中,该存储介质可以是前述图6所示实施例中的存储器。
该存储介质上存储有计算机程序,该程序被处理器执行时实现前述实施例中的图像处理方法。进一步的,该计算机可存储介质还可以是U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个模块或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或模块的间接耦合或通信连接,可以是电性,机械或其它的形式。
作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理模块,即可以位于一个地方,或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能模块可以集成在一个处理模块中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。
集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个可读存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例方法的全部或部分步骤。而前述的可读存储介质包括:U盘、移动硬盘、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
需要说明的是,对于前述的各方法实施例,为了简便描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其它顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定都是本申请所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其它实施例的相关描述。
以上为对本申请所提供的图像处理方法、装置、电子装置及存储介质的描述,对于本领域的技术人员,依据本申请实施例的思想,在具体实施方式及应用范围上均会有改变之处,综上,本说明书内容不应理解为对本申请的限制。
Claims (10)
1.一种图像处理方法,其特征在于,所述图像处理方法包括:
获取摄像头拍摄的当前帧图像以及拍摄所述当前帧图像时陀螺仪的运动参数;
确定所述当前帧图像的感兴趣区域;
利用所述感兴趣区域与所述陀螺仪的运动参数确定下一帧图像的显示区域并对所述下一帧图像的显示区域部分进行显示。
2.根据权利要求1所述的图像处理方法,其特征在于,所述获取摄像头拍摄的当前帧图像以及拍摄所述当前帧图像时陀螺仪的运动参数,包括:
获取摄像头的变焦倍数;
当所述变焦倍数大于预设的变焦倍数时,获取陀螺仪的稳定时间;
当所述陀螺仪的稳定时间大于预设的时间时,获取摄像头拍摄的当前帧图像以及拍摄所述当前帧图像时陀螺仪的运动参数。
3.根据权利要求2所述的图像处理方法,其特征在于,所述获取陀螺仪的稳定时间,包括:
持续获取陀螺仪的运动参数;
根据所述陀螺仪的运动参数变化确定陀螺仪的运动量;
当所述陀螺仪的运动量小于预设的运动量时,确定所述陀螺仪处于稳定状态;
获取所述陀螺仪于所述稳定状态中的保持时间;
所述保持时间为陀螺仪的稳定时间。
4.根据权利要求1所述的图像处理方法,其特征在于,所述确定所述当前帧图像的感兴趣区域,包括:
将所述当前帧图像进行分区;
确定所述当前帧图像各分区的置信度;
根据所述当前帧图像各分区的置信度确定所述当前帧图像的感兴趣区域。
5.根据权利要求4所述的图像处理方法,其特征在于,所述将所述当前帧图像进行分区,包括:
将所述当前帧图像进行边缘分割,提取边缘;
根据所述提取的边缘将所述当前帧图像进行分区。
6.根据权利要求4所述的图像处理方法,其特征在于,所述确定所述当前帧图像各分区的置信度,包括:
获取所述当前帧图像各分区的尺寸大小;
根据所述当前帧图像各分区的图像内容、位置以及在所述当前帧图像中出现的次数确定所述当前帧图像各分区的权重;
利用所述各分区的尺寸大小以及所述各分区的权重确定所述当前帧图像各分区的置信度。
7.根据权利要求1~6中任意一项所述的图像处理方法,其特征在于,所述利用所述感兴趣区域与所述陀螺仪的运动参数确定下一帧图像的显示区域,包括:
根据所述感兴趣区域确定包含所述感兴趣区域的最小矩形框;
确定所述最小矩形框的中心;
根据所述陀螺仪的运动参数将当前帧图像中心向所述矩形框的中心移动得到下一帧图像的显示区域中心;
根据所述下一帧图像的显示区域中心确定下一帧图像的显示区域。
8.一种图像处理装置,其特征在于,所述图像处理装置包括:
获取模块,用于获取摄像头拍摄的当前帧图像以及拍摄所述当前帧图像时陀螺仪的运动参数;
感兴趣区域确定模块,用于确定所述当前帧图像的感兴趣区域;
显示区域确定模块,用于利用所述感兴趣区域与所述陀螺仪的运动参数确定下一帧图像的显示区域并对所述下一帧图像的显示区域部分进行显示。
9.一种电子装置,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时,实现权利要求1至7中任意一项所述的图像处理方法中的步骤。
10.一种存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时,实现权利要求1至7中的任意一项所述的图像处理方法中的步骤。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010021644.4A CN111212222A (zh) | 2020-01-09 | 2020-01-09 | 图像处理方法、装置、电子装置及存储介质 |
PCT/CN2021/070845 WO2021139764A1 (zh) | 2020-01-09 | 2021-01-08 | 图像处理方法、装置、电子装置及存储介质 |
EP21738023.7A EP4090000A4 (en) | 2020-01-09 | 2021-01-08 | METHOD AND DEVICE FOR IMAGE PROCESSING, ELECTRONIC DEVICE AND STORAGE MEDIUM |
US17/811,508 US20220345628A1 (en) | 2020-01-09 | 2022-07-08 | Method for image processing, electronic device, and storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010021644.4A CN111212222A (zh) | 2020-01-09 | 2020-01-09 | 图像处理方法、装置、电子装置及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111212222A true CN111212222A (zh) | 2020-05-29 |
Family
ID=70786051
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010021644.4A Pending CN111212222A (zh) | 2020-01-09 | 2020-01-09 | 图像处理方法、装置、电子装置及存储介质 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20220345628A1 (zh) |
EP (1) | EP4090000A4 (zh) |
CN (1) | CN111212222A (zh) |
WO (1) | WO2021139764A1 (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021139764A1 (zh) * | 2020-01-09 | 2021-07-15 | Oppo广东移动通信有限公司 | 图像处理方法、装置、电子装置及存储介质 |
CN113163254A (zh) * | 2021-04-06 | 2021-07-23 | 广州津虹网络传媒有限公司 | 直播图像处理方法、装置及电子设备 |
CN113438421A (zh) * | 2021-06-30 | 2021-09-24 | Oppo广东移动通信有限公司 | 图像处理方法、装置、终端和可读存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2516486A (en) * | 2013-07-24 | 2015-01-28 | Nokia Corp | Auto focus determination apparatus |
CN105760886A (zh) * | 2016-02-23 | 2016-07-13 | 北京联合大学 | 一种基于目标识别与显著性检测的图像场景多对象分割方法 |
CN107404615A (zh) * | 2017-06-29 | 2017-11-28 | 联想(北京)有限公司 | 图像录制方法及电子设备 |
CN110536057A (zh) * | 2019-08-30 | 2019-12-03 | Oppo广东移动通信有限公司 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6172707B1 (en) * | 1992-06-22 | 2001-01-09 | Canon Kabushiki Kaisha | Image pickup device |
US9195880B1 (en) * | 2013-03-29 | 2015-11-24 | Google Inc. | Interactive viewer for image stacks |
JP6429454B2 (ja) * | 2013-11-28 | 2018-11-28 | キヤノン株式会社 | 撮像装置、撮像装置の制御方法および撮像装置の制御プログラム |
US9781350B2 (en) * | 2015-09-28 | 2017-10-03 | Qualcomm Incorporated | Systems and methods for performing automatic zoom |
KR102623391B1 (ko) * | 2017-01-10 | 2024-01-11 | 삼성전자주식회사 | 영상 출력 방법 및 이를 지원하는 전자 장치 |
US20190282213A1 (en) * | 2018-03-16 | 2019-09-19 | EchoNous, Inc. | Systems and methods for motion-based control of ultrasound images |
CN109413334B (zh) * | 2018-12-13 | 2020-09-25 | 浙江舜宇光学有限公司 | 拍摄方法和拍摄装置 |
CN112954219A (zh) * | 2019-03-18 | 2021-06-11 | 荣耀终端有限公司 | 一种多路录像方法及设备 |
CN111212222A (zh) * | 2020-01-09 | 2020-05-29 | Oppo广东移动通信有限公司 | 图像处理方法、装置、电子装置及存储介质 |
-
2020
- 2020-01-09 CN CN202010021644.4A patent/CN111212222A/zh active Pending
-
2021
- 2021-01-08 WO PCT/CN2021/070845 patent/WO2021139764A1/zh unknown
- 2021-01-08 EP EP21738023.7A patent/EP4090000A4/en not_active Withdrawn
-
2022
- 2022-07-08 US US17/811,508 patent/US20220345628A1/en active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2516486A (en) * | 2013-07-24 | 2015-01-28 | Nokia Corp | Auto focus determination apparatus |
CN105760886A (zh) * | 2016-02-23 | 2016-07-13 | 北京联合大学 | 一种基于目标识别与显著性检测的图像场景多对象分割方法 |
CN107404615A (zh) * | 2017-06-29 | 2017-11-28 | 联想(北京)有限公司 | 图像录制方法及电子设备 |
CN110536057A (zh) * | 2019-08-30 | 2019-12-03 | Oppo广东移动通信有限公司 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021139764A1 (zh) * | 2020-01-09 | 2021-07-15 | Oppo广东移动通信有限公司 | 图像处理方法、装置、电子装置及存储介质 |
CN113163254A (zh) * | 2021-04-06 | 2021-07-23 | 广州津虹网络传媒有限公司 | 直播图像处理方法、装置及电子设备 |
CN113438421A (zh) * | 2021-06-30 | 2021-09-24 | Oppo广东移动通信有限公司 | 图像处理方法、装置、终端和可读存储介质 |
CN113438421B (zh) * | 2021-06-30 | 2023-02-17 | Oppo广东移动通信有限公司 | 图像处理方法、装置、终端和可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
EP4090000A1 (en) | 2022-11-16 |
EP4090000A4 (en) | 2023-06-21 |
US20220345628A1 (en) | 2022-10-27 |
WO2021139764A1 (zh) | 2021-07-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108322663B (zh) | 拍照方法、装置、终端及存储介质 | |
CN111212222A (zh) | 图像处理方法、装置、电子装置及存储介质 | |
CN107404615B (zh) | 图像录制方法及电子设备 | |
CN112637500B (zh) | 图像处理方法及装置 | |
CN110084765B (zh) | 一种图像处理方法、图像处理装置及终端设备 | |
CN113099122A (zh) | 拍摄方法、装置、设备和存储介质 | |
CN112532883B (zh) | 拍摄防抖方法、装置、电子设备和可读存储介质 | |
US11949986B2 (en) | Anti-shake method, anti-shake apparatus, and electronic device | |
CN112734659A (zh) | 图像校正方法、装置及电子设备 | |
CN112437232A (zh) | 拍摄方法、装置、电子设备及可读存储介质 | |
CN112738405B (zh) | 视频拍摄方法、装置和电子设备 | |
CN112927241A (zh) | 图片截取和缩略图生成方法、系统、设备及储存介质 | |
CN110602410A (zh) | 一种图像处理方法、装置、航拍相机及存储介质 | |
CN113438421B (zh) | 图像处理方法、装置、终端和可读存储介质 | |
CN113052763B (zh) | 一种融合图像生成方法、装置、计算机设备和存储介质 | |
CN112672058B (zh) | 拍摄方法及装置 | |
CN113660420A (zh) | 视频帧处理方法和视频帧处理装置 | |
CN114387157A (zh) | 一种图像处理方法、装置及计算机可读存储介质 | |
CN112367464A (zh) | 图像输出方法、装置及电子设备 | |
CN112261262A (zh) | 图像校准方法和装置、电子设备和可读存储介质 | |
CN108431867B (zh) | 一种数据处理方法及终端 | |
CN112333388B (zh) | 图像显示方法、装置和电子设备 | |
CN113709436B (zh) | 基于连续变焦的紫边校正方法、装置和电子设备 | |
WO2022001733A1 (zh) | 一种拍摄对象的显示方法及装置、存储介质、终端 | |
CN115103112A (zh) | 镜头控制方法和电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200529 |
|
RJ01 | Rejection of invention patent application after publication |