CN109327626A - 图像采集方法、装置、电子设备和计算机可读存储介质 - Google Patents

图像采集方法、装置、电子设备和计算机可读存储介质 Download PDF

Info

Publication number
CN109327626A
CN109327626A CN201811520709.9A CN201811520709A CN109327626A CN 109327626 A CN109327626 A CN 109327626A CN 201811520709 A CN201811520709 A CN 201811520709A CN 109327626 A CN109327626 A CN 109327626A
Authority
CN
China
Prior art keywords
image
electronic equipment
depth
frame rate
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811520709.9A
Other languages
English (en)
Other versions
CN109327626B (zh
Inventor
张弓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201811520709.9A priority Critical patent/CN109327626B/zh
Publication of CN109327626A publication Critical patent/CN109327626A/zh
Application granted granted Critical
Publication of CN109327626B publication Critical patent/CN109327626B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W52/00Power management, e.g. TPC [Transmission Power Control], power saving or power classes
    • H04W52/02Power saving arrangements
    • H04W52/0209Power saving arrangements in terminal devices
    • H04W52/0261Power saving arrangements in terminal devices managing power supply demand, e.g. depending on battery level
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/70Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Environmental & Geological Engineering (AREA)
  • Studio Devices (AREA)

Abstract

本申请涉及一种图像采集方法、装置、电子设备和计算机可读存储介质。所述方法包括:当检测到图像采集指令时,获取电子设备当前的电量值,查找与电量值对应的目标帧率,通过摄像头以目标帧率采集图像。由于在电子设备的不同电量值时,电子设备可以通过摄像头采用不同的帧率进行图像采集,可以降低电子设备的功耗。

Description

图像采集方法、装置、电子设备和计算机可读存储介质
技术领域
本申请涉及影像技术领域,特别是涉及一种图像采集方法、装置、电子设备、计算机可读存储介质。
背景技术
随着影像技术的发展,通过摄像头采集图像的现象越来越频繁。人们可以在旅行、聚会等场景下通过摄像头采集图像,也可以通过摄像头采集包含人脸的图像来解锁电子设备等,然而,电子设备通过摄像头采集图像时存在功耗消耗较大问题。
发明内容
本申请实施例提供一种图像采集方法、装置、电子设备和计算机可读存储介质,可以降低功耗。
一种图像采集方法,包括:
当检测到图像采集指令时,获取电子设备当前的电量值;
查找与所述电量值对应的目标帧率;
通过所述摄像头以所述目标帧率采集图像。
一种图像采集装置,包括:
获取模块,用于当检测到图像采集指令时,获取电子设备当前的电量值;
查找模块,用于查找与所述电量值对应的目标帧率;
采集模块,用于通过所述摄像头以所述目标帧率采集图像。
一种电子设备,包括存储器及处理器,所述存储器中储存有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行如下步骤:
当检测到图像采集指令时,获取电子设备当前的电量值;
查找与所述电量值对应的目标帧率;
通过所述摄像头以所述目标帧率采集图像。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如下步骤:
当检测到图像采集指令时,获取电子设备当前的电量值;
查找与所述电量值对应的目标帧率;
通过所述摄像头以所述目标帧率采集图像。
上述图像采集方法、装置、电子设备和计算机可读存储介质,通过在检测到图像采集指令时,获取电子设备当前的电量值,查找与电量值对应的目标帧率,通过摄像头以目标帧率采集图像,即在电子设备的不同电量值时通过摄像头采用不同的帧率进行图像采集,可以降低电子设备的功耗。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为一个实施例中图像采集方法的应用环境图;
图2为一个实施例中图像采集方法的流程图;
图3为一个实施例中通过深度摄像头采集深度图像的流程图;
图4为一个实施例中获取第一区域的流程图;
图5为另一个实施例中图像采集方法的流程图;
图6为一个实施例的图像采集装置的结构框图;
图7为一个实施例中电子设备的内部结构示意图;
图8为一个实施例中图像处理电路的示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
可以理解,本申请所使用的术语“第一”、“第二”等可在本文中用于描述各种元件,但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说,在不脱离本申请的范围的情况下,可以将第一深度图像称为第二深度图像,且类似地,可将第二深度图像称为第一深度图像。第一深度图像和第二深度图像两者都是深度图像,但其不是同一深度图像。
图1为一个实施例中图像采集方法的应用环境示意图。如图1所示,该应用环境包括电子设备110。电子设备110可以检测图像采集指令,当检测到图像采集指令时,获取电子设备110当前的电量值,查找与电量值对应的目标帧率,通过摄像头以目标帧率采集图像。可以理解的是,上述电子设备110可以不限于是各种手机、电脑、可携带设备等。
图2为一个实施例中图像采集方法的流程图。本实施例中的图像采集方法,以运行于图1中的电子设备上为例进行描述。如图2所示,图像采集方法包括步骤202至步骤206。
步骤202,当检测到图像采集指令时,获取电子设备当前的电量值。
图像采集指令是用于指示电子设备通过摄像头采集图像的指令。其中,摄像头可以是彩色摄像头、黑白摄像头、深度摄像头等中的一个或多个。图像采集指令可以是用户通过点击电子设备显示屏上的按钮生成的,也可以用户通过按压电子设备的控件生成的,还可以是用户滑动电子设备显示屏生成的等。电子设备可以检测生成的图像采集指令。
电子设备的运行过程中应用程序和硬件电路等都会消耗功耗,例如,电子设备在通过摄像头采集图像时,摄像头上电采集预览图像时耗电、预览图像在显示屏展示时耗电、图像处理时耗电等。电子设备当前的电量值即电子设备剩余的可用电量值。电子设备可以在检测到图像采集指令时,获取电子设备当前的电量值。
步骤204,查找与电量值对应的目标帧率。
摄像头的采集帧率是指电子设备通过摄像头采集图像的帧率。电子设备通过摄像头采集的图像可以实时展示在显示屏上,摄像头的采集帧率越高、则电子设备的功耗越大,反之摄像头的采集帧率越低,则电子设备的功耗越小。
电子设备可以预设不同电量值对应的采集帧率,进而当根据图像采集指令获取电子设备当前的电量值时,可以获取与当前的电量值对应的采集帧率作为目标帧率。电子设备也可以预设不同电量区间对应的采集帧率。例如,电量值在10%至20%之间时采集帧率为30帧每秒,电量值在20%至40%之间采集帧率为35帧每秒,电量值在40%至80%之间为40帧每秒等不限于此,则电子设备根据当前的电量值确定对应的电量区间,进而得到该电量区域对应的目标帧率,如当当前电量值为12%、15%、或17%时,目标帧率为30帧每秒,当当前的电量值为25%、30%、或38%时,目标帧率为35帧每秒。
步骤206,通过摄像头以目标帧率采集图像。
摄像头在实际应用时通常有一个预设帧率,当刚开启摄像头时,摄像头通过该预设帧率来采集图像。电子设备可以在查找到与当前的电量值对应的目标帧率时,将摄像头的采集帧率调整为目标帧率,通过摄像头以目标帧率采集图像。在一个实施例中,电子设备也可以在摄像头在使用过程中,实时检测电子设备剩余的电量值,从而实时调整摄像头的采集帧率。
本申请实施例通过在检测到图像采集指令时,获取电子设备当前的电量值,查找与电量值对应的目标帧率,通过摄像头以目标帧率采集图像,避免电子设备处于低电量时摄像头采用统一的采集帧率而耗费电子设备的功耗的问题,可以降低电子设备的功耗,进而延长电子设备的续航时间。
在一个实施例中,提供的图像采集方法中查找与电量值对应的目标帧率的之前,还包括:判断电量值是否低于电量阈值,当电量值低于电量阈值时,则执行查找与电量值对应的目标帧率的操作。
电量阈值可以根据实际应用需求设定,在此不做限定。例如,电量阈值可以是40%、50%、55%、60%等不限于此。电子设备可以判断电量值是否低于电量阈值,当电量值低于电量阈值时,查找与电量值对应的目标帧率,通过摄像头以目标帧率采集图像。在本申请实施例中,目标帧率小于或等于摄像头的默认采集帧率。电子设备在电量值大于或等于电量阈值时,通过摄像头以默认采集帧率采集图像,进而在电量值小于电量阈值,查找与电量阈值对应的目标帧率,通过摄像头以目标帧率采集图像,可以在电子设备电量充足时保证图像在显示屏上预览时的流畅性,同时在电量不足降低功耗,延迟电子设备的续航时间,可以满足电子设备在不同电量值时的需求,提高用户粘度。
在一个实施例中,提供的图像采集方法中的摄像头为深度摄像头,该方法中通过摄像头以目标帧率采集图像的过程包括:通过深度摄像头以目标帧率采集深度图像。
深度摄像头是指可用于获得被拍摄物体的深度信息的摄像头。具体地,深度摄像头可以是结构光摄像头,也可以是TOF(Time of flight,飞行时间测距)摄像头等,还可以是其他可获取深度信息的摄像头。结构光摄像头通过向被测物体表面投射可控制的光点、光条或光面结构;并接收可控制的光点、光条或光面结构的反射光,且根据发射光的形变量获得深度图像。TOF摄像头通过向场景发射近红外光;接收反射的近红外线,通过计算反射的近红外线时间差或相位差,获取场景的深度信息;将场景的轮廓以不同颜色代表不同距离,以获取深度图像。
电子设备可以在接收到深度图像采集指令时,获取电子设备的当前电量值,查找与电量值对应的目标帧率,将深度摄像头的采集帧率调整为目标帧率,通过深度摄像头以目标帧率采集图像。在一个实施例中,电子设备可以包含一个或多个摄像头,此时电子设备可以对一个或多个摄像头进行帧率调整;当电子设备对多个摄像头进行帧率调整时,可以分别调整各个摄像头的采集帧率,也可以统一将各个摄像头调整为相同的采集帧率。
在一个实施例中,电子设备包含的摄像头中包含TOF摄像头,电子设备可以在接收到深度图像采集指令时,根据电子设备当前的电量值调整深度摄像头的帧率。在相同的采集帧率下,相比于其他类型的深度摄像头,TOF摄像头在采集深度图像的过程,需要向拍摄场景发射近红外光,因而消耗的功耗比其他类型的深度摄像头更大,因此,在TOF摄像头采集深度图像时,根据电子设备当前的电量值调整TOF摄像头的采集帧率,可以有效的降低电子设备的功耗,延长电子设备的续航时间。
图3为一个实施例中查找目标帧率的流程图。如图3所示,在一个实施例中,提供的图像采集方法中通过摄像头以目标帧率采集图像的过程,包括:
步骤302,获取深度摄像头以目标帧率采集的第一深度图像。
深度摄像头可以是前置摄像头,也可以是后置摄像头。深度图像是深度摄像头采集的,由多个像素点的深度信息组成的图像。深度信息是指摄像头与拍摄场景中被拍摄物体之间的距离信息。第一深度图像可以是深度摄像头通过目标帧率拍摄的深度图像。电子设备可以根据当前的电量值查找对应的目标帧率,通过深度摄像头以目标帧率采集第一深度图像。
步骤304,检测第一深度图像的目标深度信息。
电子设备检测第一深度图像的目标深度信息。具体地,目标深度信息可以是第一深度图像中包含的深度信息的总和,也可以是第一深度图像中包含的深度信息的平均值等。电子设备可以获取第一深度图像中小于深度阈值的深度信息的平均值作为目标深度信息,还可以获取第一深度图像中指定区域的深度信息的平均值作为目标深度信息等,不限于此。
步骤306,根据目标深度信息对目标帧率进行调整,通过深度摄像头以调整后的目标帧率采集第二深度图像。
当深度摄像头为TOF摄像头时,TOF摄像头在采集深度图像的过程,需要向拍摄场景发射近红外光,并接收反射的红外光,因而当采用统一的采集帧率采集深度图像时,深度图像的准确性会随着被拍摄物体距离的增加而降低。
电子设备可以预设不同的深度信息的帧率调整幅度,进而可以根据第一深度图像得到的目标深度信息对目标帧率进行调整。例如,深度信息在0至1米之间的调整幅度为减少4帧每秒、深度信息在1米至2米之间的调整幅度为不变、深度信息在2米至4米之间的调整幅度为增加5帧每秒等,当目标帧率为20帧每秒,目标深度信息为3米时,则调整后的目标帧率为25帧每秒,电子设备可以通过深度摄像头以25帧每秒的帧率采集第二深度图像。电子设备根据目标深度信息确定对应的调整幅度,进而对目标帧率进行调整,从而通过深度摄像头以调整后的目标帧率采集第二深度图像,可以提高采集的深度图像的准确性。
在一个实施例中,提供的图像采集方法中检测第一深度图像的目标深度信息的过程可以包括:获取第一深度图像中的第一区域;将第一区域包含的深度信息的平均值作为目标深度信息。
第一区域可以是用户输入的区域,也可以是电子设备预设的区域。例如,第一区域中心与深度图像的中心重合,像素值为100*100像素、50*100像素、80*100、或120*200像素值的区域等,不限于此。第一区域还可以是根据第一深度图像中包含的深度信息确定的区域。例如,第一区域可以是第一深度图像中深度信息低于深度阈值的区域;也可以是第一深度图像包含的各个连通区域中面积最大的区域等,不限于此。其中,连通区域是指第一深度图像中深度信息在预设范围内的连续区域。电子设备还可以根据目标检测算法、目标跟踪算法等识别第一深度图像中的第一区域。电子设备可以获取第一深度图像中的第一区域,将第一区域包含的深度信息的平均值作为目标深度信息,可以提高目标深度信息的可信度。
图4为一个实施例中获取第一区域的流程图。如图4所示,在一个实施例中,提供的图像采集方法中获取第一深度图像中的第一区域的过程包括:
步骤402,获取与第一深度图像对应的可视图像。
可视图像是指包含被拍摄物体的形状、轮廓等信息的图像。可视图像可以是彩色图像,也可以是灰度图像、单色图像等。通常,电子设备通过深度摄像头采集深度图像的同时,会通过其他摄像头采集可视图像,进而根据深度图像包含的深度信息对可视图像进行处理。例如,当电子设备包含深度摄像头和彩色摄像头时,可以通过深度摄像头和彩色摄像头分别采集深度图像和可视图像,电子设备可以获取与第一深度图像对应的可视图像。与第一深度图像对应的可视图像的拍摄场景与第一深度图像相同。
步骤404,识别可视图像的第二区域,其中,第二区域包含目标物体。
目标物体是指拍摄场景中包含的拍摄主体。例如,目标物体可以是人、动物、建筑物等。电子设备可以将可视图像中的图像特征信息与预存物体对应的特征信息进行匹配,获取匹配成功的特征信息对应的预存物体即为可视图像中的目标物体,电子设备可以获取可视图像中目标物体所在的第二区域。电子设备也可以对可视图像进行目标识别,具体地,可以根据VGG(Visual Geometry Group)、CNN(Convolutional Neural Network)、SSD(single shot multibox detector)、决策树(Decision Tree)等深度学习算法训练目标检测模型,根据目标检测模型识别可视图像中包含的目标物体及目标物体对应的第二区域。电子设备识别可视图像的目标物体后,还可以通过目标追踪算法进行目标追踪,实时更新可视图像中的第二区域。
步骤406,获取第一深度图像中与第二区域对应的第一区域。
电子设备获取第一深度图像中与第二区域对应的第一区域。具体地,电子设备可以获取可视图像中第二区域的边界对应的像素点位置,根据边界的像素点位置获取第一深度图像中对应的第一区域;电子设备也可以将可视图像中第二区域映射到第一深度图像中,获取第一深度图像中对应的第一区域。
通过获取与第一深度图像对应的可视图像,识别可视图像中包含目标物体的第二区域,获取第一深度图像中与第二区域对应的第一区域,可以提高第一区域的准确性。
图5为另一个实施例中图像采集方法的流程图。如图5所示,该图像采集方法包括:
步骤502,当检测到图像采集指令时,获取发起图像采集指令的目标应用程序。
应用程序是指可以完成特定工作的计算机程序。具体地,应用程序具备调用摄像头来采集图像的功能。例如,Instagram可以通过摄像头采集图像、微信可以通过摄像头采集图像或扫描二维码图像、支付类应用或锁屏应用可以通过摄像头采集人脸图像进行识别等不限于此。电子设备可以在检测到图像采集指令时,获取发起图像采集指令的目标应用程序。
步骤504,当判断目标应用程序属于预设应用程序时,根据图像采集指令获取电子设备当前的电量值。
具体地,电子设备可以根据对图像准确度的要求、图像预览时的流畅性要求等确定预设应用程序。预设应用程序可以是对图像准确度要求不高或图像预览流畅性要求较低的应用程序。电子设备可以在获取到图像采集指令对应的目标应用程序时,判断该目标应用程序是否属于预设应用程序,当该目标应用程序属于预设应用程序时,根据图像采集指令获取电子设备当前的电量值。
步骤506,查找与电量值对应的目标帧率。
步骤508,通过摄像头以目标帧率采集图像。
通过在接收到图像采集指令时,获取发起图像采集指令的目标应用程序,当目标应用程序属于预设应用程序时,获取电子设备当前的电量值,查找与电量值对应的目标帧率,将摄像头的采集帧率调整为目标帧率,通过摄像头以目标帧率采集图像,可以提高摄像头帧率调整的准确性,避免采用统一的采集帧率采集图像时造成的功耗较大的问题,减少了电子设备的功耗。
在一个实施例中,提供的图像采集方法还可以包括:当判断目标应用程序不属于预设应用程序时,通过摄像头以预设帧率采集图像。
摄像头在实际应用时通过有一个预设帧率,当刚开启摄像头时,摄像头以该预设帧率采集图像。当判断目标应用程序属于预设应用程序时,电子设备通过摄像头根据电量值对应的目标帧率采集图像;当判断目标应用程序不属于预设时,电子设备根据预设帧率采集图像。
电子设备根据发起图像采集指令的目标应用程序判断目标应用程序是否属于预设应用程序,从而获取对应的采集帧率进行图像采集,当目标应用程序不属于预设应用程序时,直接以预设帧率采集图像,可以确保采集的图像的准确性,满足不同应用程序的需求,提高用户粘度。
在一个实施例中,提供了一种图像采集方法,实现该方法的具体操作如下所述:
首先,当检测到图像采集指令时,电子设备获取当前的电量值。电子设备当前的电量值即电子设备剩余的可用电量值。图像采集可以是用户通过点击电子设备显示屏上的按钮生成的,也可以用户通过按压电子设备的控件生成的,还可以是用户滑动电子设备显示屏生成的等。电子设备可以检测生成的图像采集指令,并根据检测到的图像采集指令获取电子设备当前的电量值。
可选地,电子设备获取发起图像采集指令的目标应用程序,当判断目标应用程序属于预设应用程序时,根据图像采集指令获取电子设备当前的电量值。具体地,电子设备可以根据对图像准确度的要求、图像预览时的流畅性要求等确定预设应用程序。预设应用程序可以是对图像准确度要求不高或图像预览流畅性要求较低的应用程序。
接着,电子设备查找与电量值对应的目标帧率。电子设备可以预设不同电量值对应的采集帧率,进而当根据图像采集指令获取电子设备当前的电量值时,可以获取与当前的电量值对应的采集帧率作为目标帧率。电子设备也可以预设不同电量区间对应的采集帧率。
可选地,电子设备判断电量值是否低于电量阈值,当电量值低于电量阈值时,电子设备查找与电量值对应的目标帧率。电量阈值可以根据实际应用需求设定,在此不做限定。例如,电量阈值可以是40%、50%、55%、60%等不限于此。电子设备可以在当电量值低于电量阈值时,查找与电量值对应的目标帧率,通过摄像头以目标帧率采集图像。
可选地,电子设备获取第一深度图像中的第一区域;将第一区域包含的深度信息的平均值作为目标深度信息。第一区域可以是用户输入的区域,也可以是电子设备预设的区域,还可以是根据第一深度图像中包含的深度信息确定的区域。电子设备还可以根据目标检测算法、目标跟踪算法等识别第一深度图像中的第一区域。电子设备可以获取第一深度图像中的第一区域,将第一区域包含的深度信息的平均值作为目标深度信息。
可选地,电子设备获取与第一深度图像对应的可视图像,识别可视图像的第二区域,其中,第二区域为包含目标物体的区域,获取第一深度图像中与第二区域对应的第一区域。具体地,电子设备可以根据VGG、CNN、SSD、决策树等深度学习算法训练目标检测模型,根据目标检测模型识别可视图像中包含的目标物体及对应的第二区域。电子设备识别可视图像的目标物体后,还可以通过目标追踪算法进行目标追踪,实时更新可视图像中的第二区域,进而获取对应的第一区域,可以提高第一区域的准确性。
接着,通过摄像头以目标帧率采集图像。电子设备可以在查找到与当前的电量值对应的目标帧率时,将摄像头的采集帧率调整为目标帧率,通过摄像头以目标帧率采集图像。可选地,电子设备还可以在摄像头在使用过程中,实时检测电子设备剩余的电量值,从而实时调整摄像头的采集帧率。
可选地,摄像头可以是深度摄像头,电子设备可以将深度摄像头的采集帧率调整为目标帧率,通过深度摄像头以目标帧率采集深度图像。具体地,深度摄像头可以是结构光摄像头,也可以是TOF摄像头等,还可以是其他可获取深度信息的摄像头。
可选地,电子设备获取深度摄像头以目标帧率采集的第一深度图像,检测第一深度图像的目标深度信息,根据目标深度信息对目标帧率进行调整,通过深度摄像头以调整后的目标帧率采集第二深度图像。
可选地,当判断目标应用程序不属于预设应用程序时,电子设备通过摄像头以预设帧率采集图像。摄像头在实际应用时通过有一个预设帧率,当刚开启摄像头时,摄像头以该预设帧率采集图像。当判断目标应用程序不属于预设应用程序时,电子设备根据预设帧率采集图像,可以确保采集的图像的准确性。
应该理解的是,虽然图2-5的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-5中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
图6为一个实施例的图像采集装置的结构框图。如图6所示,该图像采集装置包括获取模块602、查找模块604、采集模块606,其中:
获取模块602,用于当检测到图像采集指令时,获取电子设备当前的电量值。
查找模块604,用于查找与电量值对应的目标帧率。
采集模块606,用于通过摄像头以目标帧率采集图像。
本申请实施例提供的图像采集装置,用于在检测到图像采集指令时,获取电子设备当前的电量值,查找与电量值对应的目标帧率,通过摄像头以目标帧率采集图像,即在电子设备的不同电量值时通过摄像头采用不同的帧率进行图像采集,可以降低电子设备的功耗。
在一个实施例中,该图像采集装置中的摄像头为深度摄像头,采集模块606还可以用于将深度摄像头的采集帧率调整为目标帧率,通过深度摄像头以目标帧率采集深度图像。
在一个实施例中,查找模块604还可以用于获取深度摄像头以目标帧率采集的第一深度图像;检测第一深度图像的目标深度信息;根据目标深度信息对目标帧率进行调整,通过深度摄像头以调整后的目标帧率采集第二深度图像。
在一个实施例中,查找模块604还可以用于获取第一深度图像中的第一区域;将第一区域包含的深度信息的平均值作为目标深度信息;根据目标深度信息对目标帧率进行调整,通过深度摄像头以调整后的目标帧率采集第二深度图像。
在一个实施例中,获取模块602还可以用于获取与第一深度图像对应的可视图像;识别可视图像的第二区域,其中,第二区域为包含目标物体的区域;获取第一深度图像中与第二区域对应的第一区域。
在一个实施例中,查找模块604还可以用于判断电量值是否小于电量,当电量值低于电量阈值时,查找与电量值对应的目标帧率。
在一个实施例中,获取模块602还可以用于获取发起图像采集指令的目标应用程序;当判断目标应用程序属于预设应用程序时,根据图像采集指令获取电子设备当前的电量值。
在一个实施例中,采集模块606还可以用于当判断目标应用程序不属于预设应用程序时,通过摄像头以预设帧率采集图像。
上述图像采集装置中各个模块的划分仅用于举例说明,在其他实施例中,可将图像采集装置按照需要划分为不同的模块,以完成上述图像采集装置的全部或部分功能。
图7为一个实施例中电子设备的内部结构示意图。如图7所示,该电子设备包括通过系统总线连接的处理器和存储器。其中,该处理器用于提供计算和控制能力,支撑整个电子设备的运行。存储器可包括非易失性存储介质及内存储器。非易失性存储介质存储有操作系统和计算机程序。该计算机程序可被处理器所执行,以用于实现以下各个实施例所提供的一种图像采集方法。内存储器为非易失性存储介质中的操作系统计算机程序提供高速缓存的运行环境。该电子设备可以是手机、平板电脑或者个人数字助理或穿戴式设备等。
本申请实施例中提供的图像采集装置中的各个模块的实现可为计算机程序的形式。该计算机程序可在电子设备上运行。该计算机程序构成的程序模块可存储在电子设备的存储器上。该计算机程序被处理器执行时,实现本申请实施例中所描述方法的步骤。
本申请实施例还提供一种电子设备。上述电子设备中包括图像处理电路,图像处理电路可以利用硬件和/或软件组件实现,可包括定义ISP(Image Signal Processing,图像信号处理)管线的各种处理单元。图8为一个实施例中图像处理电路的示意图。如图8所示,为便于说明,仅示出与本申请实施例相关的图像处理技术的各个方面。
如图8所示,图像处理电路包括ISP处理器840和控制逻辑器850。成像设备810捕捉的图像数据首先由ISP处理器840处理,ISP处理器840对图像数据进行分析以捕捉可用于确定和/或成像设备810的一个或多个控制参数的图像统计信息。成像设备810可包括具有一个或多个透镜812和图像传感器814的照相机。图像传感器814可包括色彩滤镜阵列(如Bayer滤镜),图像传感器814可获取用图像传感器814的每个成像像素捕捉的光强度和波长信息,并提供可由ISP处理器840处理的一组原始图像数据。传感器820(如陀螺仪)可基于传感器820接口类型把采集的图像处理的参数(如防抖参数)提供给ISP处理器840。传感器820接口可以利用SMIA(Standard Mobile Imaging Architecture,标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。
此外,图像传感器814也可将原始图像数据发送给传感器820,传感器820可基于传感器820接口类型把原始图像数据提供给ISP处理器840,或者传感器820将原始图像数据存储到图像存储器830中。
ISP处理器840按多种格式逐个像素地处理原始图像数据。例如,每个图像像素可具有8、10、12或14比特的位深度,ISP处理器840可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中,图像处理操作可按相同或不同的位深度精度进行。
ISP处理器840还可从图像存储器830接收图像数据。例如,传感器820接口将原始图像数据发送给图像存储器830,图像存储器830中的原始图像数据再提供给ISP处理器840以供处理。图像存储器830可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器,并可包括DMA(Direct Memory Access,直接直接存储器存取)特征。
当接收到来自图像传感器814接口或来自传感器820接口或来自图像存储器830的原始图像数据时,ISP处理器840可进行一个或多个图像处理操作,如时域滤波。处理后的图像数据可发送给图像存储器830,以便在被显示之前进行另外的处理。ISP处理器840从图像存储器830接收处理数据,并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。ISP处理器840处理后的图像数据可输出给显示器870,以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit,图形处理器)进一步处理。此外,ISP处理器840的输出还可发送给图像存储器830,且显示器870可从图像存储器830读取图像数据。在一个实施例中,图像存储器830可被配置为实现一个或多个帧缓冲器。此外,ISP处理器840的输出可发送给编码器/解码器860,以便编码/解码图像数据。编码的图像数据可被保存,并在显示于显示器870设备上之前解压缩。编码器/解码器860可由CPU或GPU或协处理器实现。
ISP处理器840确定的统计数据可发送给控制逻辑器850单元。例如,统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜812阴影校正等图像传感器814统计信息。控制逻辑器850可包括执行一个或多个例程(如固件)的处理器和/或微控制器,一个或多个例程可根据接收的统计数据,确定成像设备810的控制参数及ISP处理器840的控制参数。例如,成像设备810的控制参数可包括传感器820控制参数(例如增益、曝光控制的积分时间、防抖参数等)、照相机闪光控制参数、透镜812控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如,在RGB处理期间)的增益水平和色彩校正矩阵,以及透镜812阴影校正参数。
本申请实施例中运用图8中图像处理技术可实现上述图像采集方法。如图8所示的图像处理电路可以包括一个或多个成像设备。
本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质,当所述计算机可执行指令被一个或多个处理器执行时,使得所述处理器执行图像采集方法的步骤。
一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行图像采集方法。
本申请实施例所使用的对存储器、存储、数据库或其它介质的任何引用可包括非易失性和/或易失性存储器。合适的非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM),它用作外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本申请专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (9)

1.一种图像采集方法,其特征在于,包括:
当检测到图像采集指令时,获取电子设备当前的电量值;
查找与所述电量值对应的目标帧率;
通过所述摄像头以所述目标帧率采集图像。
2.根据权利要求1所述的方法,其特征在于,所述摄像头为深度摄像头;所述通过所述摄像头以所述目标帧率采集图像,包括:
获取所述深度摄像头以所述目标帧率采集的第一深度图像;
检测所述第一深度图像的目标深度信息;
根据所述目标深度信息对所述目标帧率进行调整,通过所述深度摄像头以调整后的目标帧率采集第二深度图像。
3.根据权利要求2所述的方法,其特征在于,所述检测所述第一深度图像的目标深度信息,包括:
获取所述第一深度图像中的第一区域;
将所述第一区域包含的深度信息的平均值作为所述目标深度信息。
4.根据权利要求3所述的方法,其特征在于,所述获取所述第一深度图像中的第一区域,包括:
获取与所述第一深度图像对应的可视图像;
识别所述可视图像的第二区域,其中,所述第二区域包含目标物体;
获取所述第一深度图像中与所述第二区域对应的所述第一区域。
5.根据权利要求1所述的方法,其特征在于,所述查找与所述电量值对应的目标帧率之前,还包括:
判断所述电量值是否低于电量阈值;
当所述电量值低于所述电量阈值时,则执行所述查找与所述电量值对应的目标帧率的操作。
6.根据权利要求1所述的方法,其特征在于,所述获取电子设备当前的电量值,包括:
获取发起所述图像采集指令的目标应用程序;
当判断所述目标应用程序属于预设应用程序时,根据所述图像采集指令获取电子设备当前的电量值。
7.一种图像采集装置,其特征在于,包括:
获取模块,用于当检测到图像采集指令时,获取电子设备当前的电量值;
查找模块,用于查找与所述电量值对应的目标帧率;
采集模块,用于通过所述摄像头以所述目标帧率采集图像。
8.一种电子设备,包括存储器及处理器,所述存储器中储存有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行如权利要求1至7中任一项所述的图像采集方法的步骤。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至6中任一项所述的方法的步骤。
CN201811520709.9A 2018-12-12 2018-12-12 图像采集方法、装置、电子设备和计算机可读存储介质 Active CN109327626B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811520709.9A CN109327626B (zh) 2018-12-12 2018-12-12 图像采集方法、装置、电子设备和计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811520709.9A CN109327626B (zh) 2018-12-12 2018-12-12 图像采集方法、装置、电子设备和计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN109327626A true CN109327626A (zh) 2019-02-12
CN109327626B CN109327626B (zh) 2020-09-11

Family

ID=65257313

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811520709.9A Active CN109327626B (zh) 2018-12-12 2018-12-12 图像采集方法、装置、电子设备和计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN109327626B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109710371A (zh) * 2019-02-20 2019-05-03 北京旷视科技有限公司 字体调节方法、装置及系统
CN110032979A (zh) * 2019-04-18 2019-07-19 北京迈格威科技有限公司 Tof传感器的工作频率的控制方法、装置、设备及介质
CN110121031A (zh) * 2019-06-11 2019-08-13 Oppo广东移动通信有限公司 图像采集方法和装置、电子设备、计算机可读存储介质
CN112887706A (zh) * 2021-01-15 2021-06-01 Oppo广东移动通信有限公司 功耗确定方法、装置、存储介质及电子设备
CN117148959A (zh) * 2023-02-27 2023-12-01 荣耀终端有限公司 眼动追踪的帧率调整方法及相关装置
WO2024002011A1 (zh) * 2022-06-27 2024-01-04 华为技术有限公司 人脸识别方法、介质、电子设备和程序产品
WO2024093432A1 (zh) * 2022-10-31 2024-05-10 荣耀终端有限公司 拍摄帧率控制方法、电子设备、芯片系统及可读存储介质

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101719965A (zh) * 2009-12-03 2010-06-02 北京中星微电子有限公司 一种移动终端的节电方法和装置
US20100194769A1 (en) * 2008-08-05 2010-08-05 Kabushiki Kaisha Toshiba Picture processing method and mobile communication terminal
CN103037099A (zh) * 2012-12-20 2013-04-10 广东欧珀移动通信有限公司 一种手机拍照预览方法及装置
CN103533333A (zh) * 2013-10-28 2014-01-22 青岛海信电器股份有限公司 景深调节方法、景深调节装置和显示装置
CN105847680A (zh) * 2016-03-28 2016-08-10 维沃移动通信有限公司 一种摄像头功耗控制方法及移动终端
CN106791017A (zh) * 2016-11-29 2017-05-31 努比亚技术有限公司 一种终端及拍照方法
CN106900037A (zh) * 2017-01-16 2017-06-27 努比亚技术有限公司 一种显示方法及终端
CN107038681A (zh) * 2017-05-31 2017-08-11 广东欧珀移动通信有限公司 图像虚化方法、装置、计算机可读存储介质和计算机设备
CN107509043A (zh) * 2017-09-11 2017-12-22 广东欧珀移动通信有限公司 图像处理方法及装置
CN107659985A (zh) * 2017-08-09 2018-02-02 广东欧珀移动通信有限公司 降低移动终端功耗的方法、装置、存储介质和移动终端
US20180095522A1 (en) * 2016-10-04 2018-04-05 Mediatek Inc. Scenario-Based Policy For Performance And Power Management In Electronic Apparatus
CN107992848A (zh) * 2017-12-19 2018-05-04 北京小米移动软件有限公司 获取深度图像的方法、装置及计算机可读存储介质
US20180198902A1 (en) * 2009-03-29 2018-07-12 NL Giken Incorporated Digital image viewing system, a cellar phone and a digital photo frame

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100194769A1 (en) * 2008-08-05 2010-08-05 Kabushiki Kaisha Toshiba Picture processing method and mobile communication terminal
US20180198902A1 (en) * 2009-03-29 2018-07-12 NL Giken Incorporated Digital image viewing system, a cellar phone and a digital photo frame
CN101719965A (zh) * 2009-12-03 2010-06-02 北京中星微电子有限公司 一种移动终端的节电方法和装置
CN103037099A (zh) * 2012-12-20 2013-04-10 广东欧珀移动通信有限公司 一种手机拍照预览方法及装置
CN103533333A (zh) * 2013-10-28 2014-01-22 青岛海信电器股份有限公司 景深调节方法、景深调节装置和显示装置
CN105847680A (zh) * 2016-03-28 2016-08-10 维沃移动通信有限公司 一种摄像头功耗控制方法及移动终端
US20180095522A1 (en) * 2016-10-04 2018-04-05 Mediatek Inc. Scenario-Based Policy For Performance And Power Management In Electronic Apparatus
CN106791017A (zh) * 2016-11-29 2017-05-31 努比亚技术有限公司 一种终端及拍照方法
CN106900037A (zh) * 2017-01-16 2017-06-27 努比亚技术有限公司 一种显示方法及终端
CN107038681A (zh) * 2017-05-31 2017-08-11 广东欧珀移动通信有限公司 图像虚化方法、装置、计算机可读存储介质和计算机设备
CN107659985A (zh) * 2017-08-09 2018-02-02 广东欧珀移动通信有限公司 降低移动终端功耗的方法、装置、存储介质和移动终端
CN107509043A (zh) * 2017-09-11 2017-12-22 广东欧珀移动通信有限公司 图像处理方法及装置
CN107992848A (zh) * 2017-12-19 2018-05-04 北京小米移动软件有限公司 获取深度图像的方法、装置及计算机可读存储介质

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109710371A (zh) * 2019-02-20 2019-05-03 北京旷视科技有限公司 字体调节方法、装置及系统
CN110032979A (zh) * 2019-04-18 2019-07-19 北京迈格威科技有限公司 Tof传感器的工作频率的控制方法、装置、设备及介质
CN110121031A (zh) * 2019-06-11 2019-08-13 Oppo广东移动通信有限公司 图像采集方法和装置、电子设备、计算机可读存储介质
CN112887706A (zh) * 2021-01-15 2021-06-01 Oppo广东移动通信有限公司 功耗确定方法、装置、存储介质及电子设备
WO2024002011A1 (zh) * 2022-06-27 2024-01-04 华为技术有限公司 人脸识别方法、介质、电子设备和程序产品
WO2024093432A1 (zh) * 2022-10-31 2024-05-10 荣耀终端有限公司 拍摄帧率控制方法、电子设备、芯片系统及可读存储介质
CN117148959A (zh) * 2023-02-27 2023-12-01 荣耀终端有限公司 眼动追踪的帧率调整方法及相关装置

Also Published As

Publication number Publication date
CN109327626B (zh) 2020-09-11

Similar Documents

Publication Publication Date Title
CN109327626A (zh) 图像采集方法、装置、电子设备和计算机可读存储介质
US10997696B2 (en) Image processing method, apparatus and device
CN109767467B (zh) 图像处理方法、装置、电子设备和计算机可读存储介质
CN108716983B (zh) 光学元件检测方法和装置、电子设备、存储介质
CN108805103A (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
US11431915B2 (en) Image acquisition method, electronic device, and non-transitory computer readable storage medium
CN110012224A (zh) 摄像头防抖系统、方法、电子设备和计算机可读存储介质
CN110536057A (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN110349163B (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN108734676A (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
TWI709110B (zh) 攝像頭校準方法和裝置、電子設備
CN110536068A (zh) 对焦方法和装置、电子设备、计算机可读存储介质
CN109712177A (zh) 图像处理方法、装置、电子设备和计算机可读存储介质
CN108616700B (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN108717530A (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
CN110121031A (zh) 图像采集方法和装置、电子设备、计算机可读存储介质
CN109040745B (zh) 摄像头自校准方法和装置、电子设备、计算机存储介质
CN110191287A (zh) 对焦方法和装置、电子设备、计算机可读存储介质
CN110290323A (zh) 图像处理方法、装置、电子设备和计算机可读存储介质
CN109146906A (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN108924426A (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN110248101A (zh) 对焦方法和装置、电子设备、计算机可读存储介质
CN109685853A (zh) 图像处理方法、装置、电子设备和计算机可读存储介质
CN108848306A (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN109559353A (zh) 摄像模组标定方法、装置、电子设备及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant