CN111901520B - 一种基于图像处理的场景自适应系统、方法及终端 - Google Patents

一种基于图像处理的场景自适应系统、方法及终端 Download PDF

Info

Publication number
CN111901520B
CN111901520B CN202010593309.1A CN202010593309A CN111901520B CN 111901520 B CN111901520 B CN 111901520B CN 202010593309 A CN202010593309 A CN 202010593309A CN 111901520 B CN111901520 B CN 111901520B
Authority
CN
China
Prior art keywords
scene
image processing
adaptive
processing parameters
adaptive adjusting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010593309.1A
Other languages
English (en)
Other versions
CN111901520A (zh
Inventor
黄勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Malio Technology Co ltd
Original Assignee
Shenzhen Malio Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Malio Technology Co ltd filed Critical Shenzhen Malio Technology Co ltd
Priority to CN202010593309.1A priority Critical patent/CN111901520B/zh
Publication of CN111901520A publication Critical patent/CN111901520A/zh
Application granted granted Critical
Publication of CN111901520B publication Critical patent/CN111901520B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)

Abstract

本发明公开了一种基于图像处理的场景自适应系统、方法及终端,包括:数据接收单元,用于接收原始图像数据;解析单元,用于解析预存的配置文件以获取图像处理参数;场景自适应调节模块,用于根据所述图像处理参数对所述原始图像数据进行调试以获取适应当前场景的目标图像数据;处理器,用于对所述场景自适应调节模块进行图像处理参数配置,并对所述场景自适应调节模块进行控制。本发明将图像处理参数通过配置文件的方式体现,使得图像处理参数可以随时修改并生效,可以将图像的效果调试到当前场景下的最优效果。

Description

一种基于图像处理的场景自适应系统、方法及终端
技术领域
本发明涉及生物识别技术领域,尤其涉及一种基于图像处理的场景自适应系统、方法及终端。
背景技术
在生物识别领域,图像是一个非常重要的部分,图像质量的好坏直接决定算法是否能识别成功,同时也影响着用户的体验。一般来说,针对于图像处理,大部分的处理方式都是通过在驱动里面或者在ISP(image signal processor,图像信号处理器)模块里面内置默认参数的方式来实现图像的调节。同一个参数可能影响多个图像指标,调到一个满意的效果可能需要很多参数配合调试等等。然而,摄像机在拍摄视频采集数据时会面对外界场景的千万种变化,对于不同的场景,芯片内部的ISP模块默认使用相同参数,因此无法将图像的效果调试到当前场景下的最优效果。
以上背景技术内容的公开仅用于辅助理解本发明的发明构思及技术方案,其并不必然属于本专利申请的现有技术,在没有明确的证据表明上述内容在本专利申请的申请日已经公开的情况下,上述背景技术不应当用于评价本申请的新颖性和创造性。
发明内容
本发明的目的在于提供一种基于图像处理的场景自适应系统、方法及终端,以解决上述背景技术问题中的至少一种问题。
为达到上述目的,本发明实施例的技术方案是这样实现的:
一种基于图像处理的场景自适应系统,包括:
数据接收单元,用于接收原始图像数据;
解析单元,用于解析预存的配置文件以获取图像处理参数;
场景自适应调节模块,用于根据所述图像处理参数对所述原始图像数据进行调试以获取适应当前场景的目标图像数据;
处理器,用于对所述场景自适应调节模块进行图像处理参数配置,并对所述场景自适应调节模块进行控制。
在一些实施例中,还包括有存储单元,用于存储所述配置文件。
在一些实施例中,所述处理器还用于获取所述原始图像数据的元数据,并基于所述元数据对所述图像处理参数进行校正以得到与当前的所述元数据对应的图像处理参数。
在一些实施例中,所述场景自适应调节模块包括多个自适应调节单元;其中,不同的自适应调节单元被配置不同的图像处理参数,通过自适应调节单元对对应的所述图像处理参数值进行修正。
在一些实施例中,所述元数据包括感光度、曝光量、曝光比以及色温其中之一种或者多种的组合,对应地,所述多个自适应调节单元包括ISO自适应调节单元、曝光量自适应调节单元、曝光比自适应调节单元、以及色温自适应调节单元。
在一些实施例中,还包括有场景判断单元,用于判断场景的应用模式;所述解析单元根据所述应用模式解析预存的配置文件以获取图像处理参数。
本发明实施例的另一技术方案为:
一种基于图像处理的场景自适应方法,包括如下步骤:
S30、获取原始图像数据;
S31、解析预存的配置文件以获取图像处理参数;
S32、开启场景自适应调节模块,并对所述场景自适应调节模块进行图像处理参数配置,由所述场景自适应调节模块基于所述图像处理参数对所述原始图像数据进行调试以获取适应当前场景的目标图像数据。
在一些实施例中,还包括如下步骤:
通过处理器获取所述原始图像数据的元数据,并基于所获取的元数据对所述图像处理参数进行校正以使图像处理参数与当前的元数据对应。
在一些实施例中,还包括如下步骤:
通过场景判断单元判断场景的应用模式,由解析单元根据所述应用模式解析预存的配置文件以获取图像处理参数。
本发明实施例又一技术方案为:
一种终端,包括:
数据采集单元,用于采集原始图像数据;
数据接收单元,用于接收所述数据采集单元所采集到的所述原始图像数据;
解析单元,用于解析预存的配置文件以获取图像处理参数;
场景自适应调节模块,用于根据所述图像处理参数对所述原始图像数据进行调试以获取适应当前场景的目标图像数据;
处理器,用于对所述场景自适应调节模块进行图像处理参数配置,并对所述场景自适应调节模块进行控制。
本发明技术方案的有益效果是:
相较于现有技术,本发明可以将图像的效果调试到当前场景下的最优效果;具体地,本发明将图像处理参数通过配置文件的方式体现,使得图像处理参数可以随时修改并生效;并且通过设置多个不同的自适应调节单元,可对多个图像处理参数进行调试,以适配不同ISO、曝光量、色温、曝光比,进而使得最后得到的目标图像数据的效果于当前场景最优;此外,通过配置文件中不同应用模式的设置,例如刷脸模式、扫码模式等,当场景处于特定模式时,可对应解析配置文件中对应模式的参数,从而可选择性地打开对应的自适应调节单元。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是根据本发明一个实施例场景自适应系统的原理框图。
图2是根据本发明另一个实施例场景自适应系统的原理框图。
图3是根据本发明一个实施例基于图像处理的场景自适应方法流程图示。
图4是采用图3方法的终端的原理框图。
图5是根据本发明又一个实施例场景自适应系统的原理框图。
图6根据本发明又一个实施例基于图像处理的场景自适应方法流程图示。
图7是采用图6方法的终端的原理框图。
具体实施方式
为了使本发明实施例所要解决的技术问题、技术方案及有益效果更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
需要说明的是,当元件被称为“固定于”或“设置于”另一个元件,它可以直接在另一个元件上或者间接在该另一个元件上。当一个元件被称为是“连接于”另一个元件,它可以是直接连接到另一个元件或间接连接至该另一个元件上。另外,连接即可以是用于固定作用也可以是用于电路连通作用。
需要理解的是,术语“长度”、“宽度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明实施例和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多该特征。在本发明实施例的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
请参阅图1所示,图1为本发明一实施例一种基于图像处理的场景自适应系统的原理框图,系统包括:数据接收单元、解析单元、场景自适应调节模块、以及处理器。
其中,数据接收单元,用于接收原始图像数据。在一个实施例中,可通过摄像头采集当前场景的视频和/或图像作为原始图像数据。一般的,摄像头至少包括镜头、图像传感器等光学元件。具体地,景物(场景中目标物体的统称)通过摄像头的镜头生成的光学图像投射到图像传感器(CCD/CMOS)表面上形成原始图像数据(即RAW图像数据),并通过对应的接口或系统总线传输到场景自适应系统的数据接收单元中以用于后续的图像处理。在一个实施例中,摄像头可以是广角镜头、微聚镜头、长焦镜头或鱼眼镜头,或者也可以是集成于基于结构光、双目、TOF等深度相机中的3D摄像头。摄像头可以独立于系统,也可以集成于系统中。
解析单元,用于解析预存的配置文件以获取图像处理参数。
场景自适应调节模块,用于根据图像处理参数对原始图像数据进行调试以获取适应当前场景的目标图像数据。
处理器,用于开启场景自适应调节模块,对场景自适应调节模块进行图像处理参数配置,并对场景自适应调节模块进行控制。
在一个实施例中,场景自适应系统还包括存储单元,用于存储配置文件。存储单元可以是本地存储器,例如:硬盘,但也可以被实现为朝向外部存储器(例如云存储器)的接口。
在一个实施例中,处理器还用于获取原始图像数据的元数据,并基于上述元数据对图像处理参数进行校正以使图像处理参数与当前的元数据精确对应,从而得到适应当前场景的目标图像数据。其中,元数据包括感光度(ISO)、曝光量、曝光比以及色温其中之一种或者多种的组合。在一个实施例中,图像处理参数包括:动态黑电平、动态CCM(ColorCorrection Matrix,颜色校正矩阵)、DRC(Dynamic Range Compression动态范围压缩)、动态DP(Defect Pixel、坏点)校正、动态CSC(Color Space Conversion,色彩空间转换)、动态3DNR(3D Noise Reduction,三维降噪)、WB(White Balance,白平衡)、动态gamma(伽马)、动态AE(自动曝光控制)、动态Shading(阴影)校正、动态Dehaze(去雾)、以及WDR(WideDynamic Range,即宽动态范围)相关合成参数等。
在一个实施例中,场景自适应调节模块对应于上述元数据包括有多个自适应调节单元,在本发明实施例中,多个自适应调节单元分别为:ISO自适应调节单元、曝光量自适应调节单元、曝光比自适应调节单元、以及色温自适应调节单元。由于不同的图像处理参数对ISO、曝光量、曝光比、色温的变化的敏感度不同,因此根据配置文件的设置,不同的自适应调节单元将被配置不同的图像处理参数并对其进行修正。在一个实例中,ISO自适应调节单元将被配置的图像处理参数包括:动态黑电平、动态CCM、动态DRC、动态DP校正、动态CSC、动态3DNR以及WB;曝光量自适应调节单元将被配置的图像处理参数包括:动态gamma、动态AE参数、动态Shading校正、动态Dehaze等;曝光比自适应调节单元将被配置的图像处理参数包括:WDR相关合成参数;而色温自适应调节单元将被配置的图像处理参数包括:动态CSC。
在一个实施例中,场景自适应调节模块被配置图像处理参数后,处理器会根据实时监控的ISO、曝光量、曝光比、色温判断对应的图像处理参数是否处于预设范围/为预设值,若否,处理器则将控制自适应调节单元对对应的图像处理参数值进行修正以使其与当前场景中的ISO、曝光量、曝光比、色温精确对应,并存储、执行修正后的图像处理参数。
为便于理解,后面对ISO、曝光量、曝光比、以及色温进行详细描述说明。
感光度,又称为ISO值,是指衡量底片(图像传感器)对于光的灵敏程度的指标。对于感光度较低的图像传感器,需要曝光更长的时间才能达到跟感光度较高的图像传感器相同的成像。摄像头的ISO可以通过提升感光器件的光线敏感度或者合并几个相邻的感光点来达到提升ISO的目的。需要说明的是,为了减少曝光时间,使用相对较高的感光度通常会引入较多的噪声,从而导致图像质量降低。
曝光量是由感光度、光圈和曝光时长确定的,不同的参数组合可以产生相等的曝光量,摄像头在拍摄图像时,如果曝光过度,则图像过亮,失去图像细节;如果曝光不足,则图像过暗,同样会失去图像细节。控制曝光就是控制总的光通量,也就是曝光过程中到达图像传感器(CCD/CMOS)表面的光子的总和。
曝光比,指的是图像传感器在采集帧图像时,图像传感器长曝光时间与短曝光时间的曝光时间比。具体地,图像传感器在采集图像时会进行多次曝光,一次长曝光,一次短曝光,然后利用图像处理方法将两次曝光的图像融合为一副图像,目的在于提升图像的宽动态范围(WDR),宽动态范围是图像能分辨最亮的亮度信号值与能分辨的最暗的亮光信号值的比值。
色温,表示光线中包含颜色成分的一个计量单位,不同色温条件下,由于光谱特性不同,拍出的照片常常会偏色,例如,在室内钨丝灯光下拍摄出来的图像就会偏黄,而在日光阴影处拍摄到的图像则偏蓝等。如果感光元件(图像传感器)本身没有自适应功能,拍摄出来的图像颜色会出现失真的情况,难以达到原来正常情况下令人满意的色彩。
需要理解的是,当使用场景发生变化时,为达到获取的目标图像数据的效果对于当前场景最优,需要调试的图像处理参数是不同的。因此,参照图2所示,在一个实施例中,上述场景自适应系统中还包括场景判断单元,用于判断场景的应用模式,解析单元根据应用模式解析预存的配置文件以获取图像处理参数。
在一个实施例中,应用模式包括有刷脸模式,即目标图像数据用于进行人脸识别,对应的,摄像头中的图像传感器采集的原始图像数据的输出模式为WDR(宽动态范围)模式。此时解析单元根据刷脸模式解析预存的配置文件获取的图像处理参数包括:动态黑电平、动态CCM、DRC、动态DP校正、动态CSC、动态3DNR、WB、动态gamma、动态AE、动态Shading校正、动态Dehaze、WDR相关合成参数等。对应地,根据配置文件的设置,处理器将会开启ISO自适应调节单元、曝光量自适应调节单元、曝光比自适应调节单元、或色温自适应调节单元,并根据元数据(包括ISO、曝光量、曝光比、色温)控制自适应调节单元对对应的参数进行修正,以使其与当前场景中的ISO、曝光量、曝光比、色温精确对应。
在一个实施例中,应用模式包括有扫码模式,即目标图像数据用于扫码识别或者支付等,对应的,摄像头中的图像传感器采集的原始图像数据的输出模式为线性模式。此时解析单元根据刷脸模式解析预存的配置文件获取的图像处理参数包括:动态黑电平、动态CCM、DRC、动态DP校正、动态CSC、动态3DNR、WB、动态gamma、动态AE、动态Shading校正、以及动态Dehaze。对应地,根据配置文件的设置,处理器将会开启ISO自适应调节单元、曝光量自适应调节单元,并根据元数据(包括ISO、曝光量)控制自适应调节单元对对应的参数进行修正,以使其与当前场景中的ISO、曝光量精确对应。
参照图3所示,作为本发明一实施例,还提供一种基于图像处理的场景自适应方法,图3所示为本发明实施例基于图像处理的场景自适应方法的流程图示,方法包括如下步骤:
S30、获取原始图像数据;
S31、解析预存的配置文件以获取图像处理参数;
S32、开启场景自适应调节模块,并对场景自适应调节模块进行图像处理参数配置,由场景自适应调节模块基于图像处理参数对原始图像数据进行调试以获取适应当前场景的目标图像数据。
在一些实施例中,还包括如下步骤:
通过处理器获取原始图像数据的元数据,并基于所获取的元数据对图像处理参数进行校正以使图像处理参数与当前的元数据精确对应;其中,所述元数据包括感光度(ISO)、曝光量、曝光比、色温其中之一种或者多种的组合。
在一些实施例中,对应上述元数据,场景自适应调节模块包括多个自适应调节单元;处理器根据实时监控的ISO、曝光量、曝光比、色温,判断对应的图像处理参数是否处于预设范围/为预设值,若否,处理器则将控制对应的自适应调节单元对对应的图像处理参数值进行修正以使其与当前场景中的ISO、曝光量、曝光比、色温精确对应,并存储、执行修正后的图像处理参数。在本发明实施例中,例如:对应于感光度(ISO)、曝光量、曝光比、色温,场景自适应调节模块包括有ISO自适应调节单元、曝光量自适应调节单元、曝光比自适应调节单元、以及色温自适应调节单元。
在一些实施例中,还包括如下步骤:
通过场景判断单元判断场景的应用模式,然后由解析单元根据应用模式解析预存的配置文件以获取图像处理参数。
具体的,本发明实施例基于图像处理的场景自适应方法可根据前述场景自适应系统执行,具体实现可以参照场景自适应系统中的描述,在此不再赘述。
参照图4所示,作为本发明一实施例,还提供一种终端,包括数据采集单元,用于采集原始图像数据;数据接收单元,用于接收数据采集单元所采集到的原始图像数据;解析单元,用于解析预存的配置文件以获取图像处理参数;场景自适应调节模块,用于根据图像处理参数对原始图像数据进行调试以获取适应当前场景的目标图像数据;处理器,用于开启场景自适应调节模块,将图像处理参数配置给场景自适应调节模块并对场景自适应调节模块进行控制。
在一个实施例中,终端可以为手机、平板电脑、个人数字助理、穿戴设备(如眼镜、手表等)等等。
处理器可以是ISP图像信号处理器,AP应用处理器,还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application SpecificIntegrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
本发明将图像处理参数通过配置文件的方式体现,使得其可以随时修改并生效;并且通过设置多个不同的自适应调节单元,可对多个图像处理参数进行调试,以适配不同ISO、曝光量、色温、曝光比,进而使得最后得到的目标图像数据的效果于当前场景最优;此外,通过配置文件中不同应用模式的设置,例如刷脸模式、扫码模式等,当场景处于特定模式时,可对应解析配置文件中对应模式的参数,从而可选择性地打开对应的自适应调节单元。
需要理解的是,图像处理参数可以预存在配置文件中,当场景变化时,通过调用配置文件可以解析其中预存的图像处理参数,并可以随时对其进行修改并生效。在一个实施例中,图像处理参数也可以直接写入场景自适应调节模块来进行处理。
参照图5所示,作为本发明另一实施例,提供一种基于图像处理的场景自适应系统,系统包括:数据接收单元,用于接收原始图像数据;场景自适应调节模块,被配置为预先写入有图像处理参数,并根据该预先写入的图像处理参数对原始图像数据进行调试以获取适应当前场景的目标图像数据;处理器,用于开启并控制场景自适应调节模块。
在一实施例中,数据接收单元接收通过摄像头采集的当前场景的视频和/或图像作为原始图像数据。一般的,摄像头至少包括镜头、图像传感器等光学元件。具体地,景物(场景中目标物体的统称)通过摄像头的镜头生成的光学图像投射到图像传感器(CCD/CMOS)表面上形成原始图像数据(即RAW图像数据)并通过对应的接口或系统总线传输到场景自适应系统的数据接收单元中以用于后续的图像处理。在一个实施例中,摄像头可以是广角镜头、微聚镜头、长焦镜头或鱼眼镜头,或者也可以是集成于基于结构光、双目、TOF等深度相机中的3D摄像头。摄像头可以独立于系统,也可以集成于系统中。
在一个实施例中,处理器还用于获取原始图像数据的元数据,并基于所获取的元数据对图像处理参数进行校正以使图像处理参数与当前的元数据精确对应,从而得到适应当前场景的目标图像数据。其中,所述元数据包括感光度(ISO)、曝光量、曝光比、色温其中之一种或者多种的组合。
在一个实施例中,图像处理参数包括:动态黑电平、动态CCM(Color CorrectionMatrix,颜色校正矩阵)、DRC(Dynamic Range Compression动态范围压缩)、动态DP(DefectPixel,坏点)校正、动态CSC(Color Space Conversion,色彩空间转换)、动态3DNR(3DNoise Reduction,三维降噪)、WB(White Balance,白平衡)、动态gamma(伽马)、动态AE(自动曝光控制)、动态Shading(阴影)校正、动态Dehaze(去雾)、以及WDR(Wide DynamicRange,即宽动态范围)相关合成参数。
在一个实施例中,场景自适应调节模块对应于上述元数据包括有多个自适应调节单元,在本发明实施例中,多个自适应调节单元分别为:ISO自适应调节单元、曝光量自适应调节单元、曝光比自适应调节单元、以及色温自适应调节单元。由于不同的图像处理参数对ISO、曝光量、曝光比、色温的变化的敏感度不同,因此不同的自适应调节单元中存储有不同的图像处理参数。在一个实例中,ISO自适应调节单元中存储的图像处理参数包括:动态黑电平、动态CCM、动态DRC、动态DP校正、动态CSC、动态3DNR、以及WB;曝光量自适应调节单元将中存储的图像处理参数包括:动态gamma、动态AE参数、动态Shading校正、动态Dehaze等;曝光比自适应调节单元中存储的图像处理参数包括:WDR相关合成参数;色温自适应调节单元中存储的图像处理参数包括:动态CSC。
在一个实施例中,处理器会根据实时监控的ISO、曝光量、曝光比、色温判断对应的图像处理参数是否处于预设范围/为预设值,若否,处理器则将控制自适应调节单元对对应的图像处理参数值进行修正以使其与当前场景中的ISO、曝光量、曝光比、色温精确对应,并将修正后的图像处理参数值写入到场景自适应调节模块中以替换之前的图像处理参数,执行修正后的图像处理参数。
在一个实施例中,上述系统中还包括场景判断单元,用于判断场景的应用模式。当场景处于不同应用模式时,处理器将会开启对应的自适应调节单元对原始图像数据进行调试以获取适应当前场景的目标图像数据。
在一实施例中,应用模式包括刷脸模式,即目标图像数据用于进行人脸识别,对应的,摄像头中的图像传感器采集的原始图像数据的输出模式为WDR(宽动态范围)模式。此时的图像处理参数包括:动态黑电平、动态CCM、DRC、动态DP校正、动态CSC、动态3DNR、WB、动态gamma、动态AE、动态Shading校正、动态Dehaze、以及WDR相关合成参数。对应地,处理器将会开启ISO自适应调节单元、曝光量自适应调节单元、曝光比自适应调节单元、色温自适应调节单元,并根据元数据(包括ISO、曝光量、曝光比、色温)控制自适应调节单元对对应的参数进行修正,以使其与当前场景中的ISO、曝光量、曝光比、色温精确对应。
在一个实施例中,应用模式为扫码模式,即目标图像数据用于扫码识别或者支付等,对应的,摄像头中的图像传感器采集的原始图像数据的输出模式为线性模式。此时的图像处理参数包括:动态黑电平、动态CCM、DRC、动态DP校正、动态CSC、动态3DNR、WB、动态gamma、动态AE、动态Shading校正、动态Dehaze。对应地,处理器将会开启ISO自适应调节单元、曝光量自适应调节单元,根据元数据(包括ISO、曝光量)控制自适应调节单元对对应的参数进行修正,以使其与当前场景中的ISO、曝光量精确对应。
参照图6所示,作为本发明一实施例,还提供一种基于图像处理的场景自适应方法,图6所示为本发明实施例基于图像处理的场景自适应方法的流程图示,方法包括如下步骤:
S60、获取原始图像数据;
S61、将图像处理参数写入场景自适应调节模块,并开启场景自适应调节模块,由场景自适应调节模块基于预先写入的图像处理参数对原始图像数据进行调试以获取适应当前场景的目标图像数据。
在一些实施例中,还包括如下步骤:
通过处理器获取原始图像数据的元数据,并基于所获取的元数据对图像处理参数进行校正以使图像处理参数与当前的元数据精确对应;其中,所述元数据包括感光度(ISO)、曝光量、曝光比、色温其中之一种或者多种的组合。
在一些实施例中,对应上述元数据,场景自适应调节模块包括多个自适应调节单元;处理器根据实时监控的ISO、曝光量、曝光比、色温,判断对应的图像处理参数是否处于预设范围/为预设值,若否,处理器则将控制对应的自适应调节单元对对应的图像处理参数值进行修正以使其与当前场景中的ISO、曝光量、曝光比、色温精确对应,并将修正后的图像处理参数值写入到场景自适应调节模块中以替换之前的图像处理参数,执行修正后的图像处理参数。在本发明实施例中,例如:对应感光度(ISO)、曝光量、曝光比、色温,场景自适应调节模块包括有ISO自适应调节单元、曝光量自适应调节单元、曝光比自适应调节单元、以及色温自适应调节单元。
在一些实施例中,还包括如下步骤:
通过场景判断单元判断场景的应用模式,由处理器开启对应的自适应调节单元对原始图像数据进行调试以获取适应当前场景的目标图像数据。
参照图7所示,作为本发明一实施例,还提供一种终端,包括:数据采集单元,用于采集原始图像数据;数据接收单元,用于接收所述数据采集单元所采集到的原始图像数据;场景自适应调节模块,被配置为预先写入有图像处理参数,并根据该预先写入的图像处理参数对原始图像数据进行调试以获取适应当前场景的目标图像数据;处理器,用于开启并控制场景自适应调节模块。
在一个实施例中,终端可以为手机、平板电脑、个人数字助理、穿戴设备(如眼镜、手表等)等等。
处理器可以是ISP图像信号处理器,AP应用处理器,还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application SpecificIntegrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。
可以理解的是,以上内容是结合具体/优选的实施方式对本发明所作的进一步详细说明,不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说,在不脱离本发明构思的前提下,其还可以对这些已描述的实施方式做出若干替代或变型,而这些替代或变型方式都应当视为属于本发明的保护范围。在本说明书的描述中,参考术语“一种实施例”、“一些实施例”、“优选实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。
在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。尽管已经详细描述了本发明的实施例及其优点,但应当理解,在不脱离由所附权利要求限定的范围的情况下,可以在本文中进行各种改变、替换和变更。
此外,本发明的范围不旨在限于说明书中所述的过程、机器、制造、物质组成、手段、方法和步骤的特定实施例。本领域普通技术人员将容易理解,可以利用执行与本文所述相应实施例基本相同功能或获得与本文所述实施例基本相同结果的目前存在的或稍后要开发的上述披露、过程、机器、制造、物质组成、手段、方法或步骤。因此,所附权利要求旨在将这些过程、机器、制造、物质组成、手段、方法或步骤包含在其范围内。

Claims (9)

1.一种基于图像处理的场景自适应系统,其特征在于,包括:
数据接收单元,用于接收原始图像数据;
场景判断单元,用于判断当前场景的应用模式;
解析单元,用于根据所述应用模式解析预存的配置文件以获取图像处理参数,不同的应用模式对应不同的图像处理参数;
场景自适应调节模块,用于根据所述图像处理参数对所述原始图像数据进行调试以获取适应当前场景的目标图像数据;所述场景自适应调节模块对应于所述原始图像数据的元数据包括有多个自适应调节单元,不同的自适应调节单元被配置不同的图像处理参数并对其进行修正;
处理器,用于对所述场景自适应调节模块进行图像处理参数配置,并对所述场景自适应调节模块进行控制。
2.如权利要求1所述基于图像处理的场景自适应系统,其特征在于:还包括有存储单元,用于存储所述配置文件。
3.如权利要求1所述基于图像处理的场景自适应系统,其特征在于:所述处理器还用于获取所述原始图像数据的元数据,并基于所述元数据对所述图像处理参数进行校正以得到与当前的所述元数据对应的图像处理参数。
4.如权利要求3所述基于图像处理的场景自适应系统,其特征在于:所述场景自适应调节模块包括多个自适应调节单元;其中,不同的自适应调节单元被配置不同的图像处理参数,通过自适应调节单元对对应的所述图像处理参数值进行修正。
5.如权利要求4所述基于图像处理的场景自适应系统,其特征在于:所述元数据包括感光度、曝光量、曝光比以及色温其中之一种或者多种的组合,对应地,所述多个自适应调节单元包括ISO自适应调节单元、曝光量自适应调节单元、曝光比自适应调节单元、以及色温自适应调节单元。
6.一种基于图像处理的场景自适应方法,其特征在于,包括如下步骤:
S30、获取原始图像数据;
判断当前场景的应用模式;
S31、根据所述应用模式解析预存的配置文件以获取图像处理参数,不同的应用模式对应不同的图像处理参数;
S32、开启场景自适应调节模块,并对所述场景自适应调节模块进行图像处理参数配置,由所述场景自适应调节模块基于所述图像处理参数对所述原始图像数据进行调试以获取适应当前场景的目标图像数据;所述场景自适应调节模块对应于所述原始图像数据的元数据包括有多个自适应调节单元,不同的自适应调节单元被配置不同的图像处理参数并对其进行修正。
7.如权利要求6所述基于图像处理的场景自适应方法,其特征在于,还包括如下步骤:
通过处理器获取所述原始图像数据的元数据,并基于所获取的元数据对所述图像处理参数进行校正以使图像处理参数与当前的元数据对应。
8.如权利要求6所述基于图像处理的场景自适应方法,其特征在于,还包括如下步骤:
通过场景判断单元判断当前场景的应用模式,由解析单元根据所述应用模式解析预存的配置文件以获取图像处理参数。
9.一种终端,其特征在于,包括:
数据采集单元,用于采集原始图像数据;
数据接收单元,用于接收所述数据采集单元所采集到的所述原始图像数据;
场景判断单元,用于判断当前场景的应用模式;
解析单元,用于根据所述应用模式解析预存的配置文件以获取图像处理参数,不同的应用模式对应不同的图像处理参数;
场景自适应调节模块,用于根据所述图像处理参数对所述原始图像数据进行调试以获取适应当前场景的目标图像数据;处理器,用于对所述场景自适应调节模块进行图像处理参数配置并对所述场景自适应调节模块进行控制;所述场景自适应调节模块对应于所述原始图像数据的元数据包括有多个自适应调节单元,不同的自适应调节单元被配置不同的图像处理参数并对其进行修正。
CN202010593309.1A 2020-06-26 2020-06-26 一种基于图像处理的场景自适应系统、方法及终端 Active CN111901520B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010593309.1A CN111901520B (zh) 2020-06-26 2020-06-26 一种基于图像处理的场景自适应系统、方法及终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010593309.1A CN111901520B (zh) 2020-06-26 2020-06-26 一种基于图像处理的场景自适应系统、方法及终端

Publications (2)

Publication Number Publication Date
CN111901520A CN111901520A (zh) 2020-11-06
CN111901520B true CN111901520B (zh) 2022-01-25

Family

ID=73207103

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010593309.1A Active CN111901520B (zh) 2020-06-26 2020-06-26 一种基于图像处理的场景自适应系统、方法及终端

Country Status (1)

Country Link
CN (1) CN111901520B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112653819B (zh) * 2020-12-15 2023-09-26 上海豫兴电子科技有限公司 车载摄像机的图像显示方法、装置、电子设备及存储介质
CN115705614A (zh) * 2021-08-05 2023-02-17 北京小米移动软件有限公司 图像处理方法、装置、电子设备及存储介质
CN114422682B (zh) * 2022-01-28 2024-02-02 安谋科技(中国)有限公司 拍摄方法、电子设备和可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105323459A (zh) * 2015-05-25 2016-02-10 维沃移动通信有限公司 图像处理方法及移动终端
CN108337433A (zh) * 2018-03-19 2018-07-27 广东欧珀移动通信有限公司 一种拍照方法、移动终端及计算机可读存储介质
CN110113534A (zh) * 2019-05-13 2019-08-09 Oppo广东移动通信有限公司 一种图像处理方法、图像处理装置及移动终端
CN110266946A (zh) * 2019-06-25 2019-09-20 普联技术有限公司 一种拍照效果自动优化方法、装置、存储介质及终端设备

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6493468B1 (en) * 1998-05-06 2002-12-10 Canon Kabushiki Kaisha Image processing apparatus and method
US7327390B2 (en) * 2003-02-04 2008-02-05 Eastman Kodak Company Method for determining image correction parameters
US9525818B2 (en) * 2013-07-29 2016-12-20 Adobe Systems Incorporated Automatic tuning of images based on metadata
US20150130967A1 (en) * 2013-11-13 2015-05-14 Nvidia Corporation Adaptive dynamic range imaging
JP6521776B2 (ja) * 2015-07-13 2019-05-29 オリンパス株式会社 画像処理装置、画像処理方法
JP6786273B2 (ja) * 2016-06-24 2020-11-18 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105323459A (zh) * 2015-05-25 2016-02-10 维沃移动通信有限公司 图像处理方法及移动终端
CN108337433A (zh) * 2018-03-19 2018-07-27 广东欧珀移动通信有限公司 一种拍照方法、移动终端及计算机可读存储介质
CN110113534A (zh) * 2019-05-13 2019-08-09 Oppo广东移动通信有限公司 一种图像处理方法、图像处理装置及移动终端
CN110266946A (zh) * 2019-06-25 2019-09-20 普联技术有限公司 一种拍照效果自动优化方法、装置、存储介质及终端设备

Also Published As

Publication number Publication date
CN111901520A (zh) 2020-11-06

Similar Documents

Publication Publication Date Title
US11228720B2 (en) Method for imaging controlling, electronic device, and non-transitory computer-readable storage medium
CN108683862B (zh) 成像控制方法、装置、电子设备及计算机可读存储介质
CN109005364B (zh) 成像控制方法、装置、电子设备以及计算机可读存储介质
CN111901520B (zh) 一种基于图像处理的场景自适应系统、方法及终端
CN107635102B (zh) 高动态范围图像曝光补偿值获取方法和装置
CN110225248B (zh) 图像采集方法和装置、电子设备、计算机可读存储介质
CN108632537B (zh) 控制方法及装置、成像设备、计算机设备及可读存储介质
CN109040609B (zh) 曝光控制方法、装置、电子设备和计算机可读存储介质
KR101549529B1 (ko) 촬상장치, 그 제어 방법, 및 기록 매체
WO2020057199A1 (zh) 成像方法、装置和电子设备
US11490024B2 (en) Method for imaging controlling, electronic device, and non-transitory computer-readable storage medium
JP6999802B2 (ja) ダブルカメラベースの撮像のための方法および装置
CN107846556B (zh) 成像方法、装置、移动终端和存储介质
CN108156369B (zh) 图像处理方法和装置
US11601600B2 (en) Control method and electronic device
CN110213498B (zh) 图像生成方法和装置、电子设备、计算机可读存储介质
WO2020034702A1 (zh) 控制方法、装置、电子设备和计算机可读存储介质
CN110049240B (zh) 摄像头控制方法、装置、电子设备和计算机可读存储介质
CN107682611B (zh) 对焦的方法、装置、计算机可读存储介质和电子设备
CN111901521B (zh) 一种基于图像处理的场景自适应系统、方法及终端
CN109005363B (zh) 成像控制方法、装置、电子设备以及存储介质
JP2008005083A (ja) 撮像装置
CN107835362B (zh) 图像存储方法、图像显示方法及电子设备
KR20110073271A (ko) 촬상 장치 및 촬상 방법
KR102068164B1 (ko) 촬상 장치 촬상 방법 및 촬상 프로그램

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant