CN111614894B - 一种图像采集方法、装置及终端设备 - Google Patents
一种图像采集方法、装置及终端设备 Download PDFInfo
- Publication number
- CN111614894B CN111614894B CN202010351661.4A CN202010351661A CN111614894B CN 111614894 B CN111614894 B CN 111614894B CN 202010351661 A CN202010351661 A CN 202010351661A CN 111614894 B CN111614894 B CN 111614894B
- Authority
- CN
- China
- Prior art keywords
- image
- light
- scene
- gain
- image sensor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 53
- 238000012545 processing Methods 0.000 claims abstract description 71
- 230000003287 optical effect Effects 0.000 claims abstract description 48
- 238000012937 correction Methods 0.000 claims abstract description 29
- 238000002834 transmittance Methods 0.000 claims abstract description 27
- 238000004590 computer program Methods 0.000 claims description 25
- 238000001514 detection method Methods 0.000 claims description 15
- 230000008569 process Effects 0.000 claims description 15
- 238000004364 calculation method Methods 0.000 claims description 9
- 239000013589 supplement Substances 0.000 abstract description 12
- 230000006870 function Effects 0.000 description 15
- 238000004891 communication Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 6
- 206010070834 Sensitisation Diseases 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 5
- 230000008313 sensitization Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 230000009469 supplementation Effects 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000002708 enhancing effect Effects 0.000 description 3
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000000047 product Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001502 supplementing effect Effects 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
- H04N9/3182—Colour adjustment, e.g. white balance, shading or gamut
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
本申请适用于图像处理技术领域，提供了一种图像采集方法、装置及终端设备，该方法包括：获取场景类型；若所述场景类型为背光场景，发出第一指令，所述第一指令用于指示调整红外灯补光强度和切换第一滤光片，其中，所述第一滤光片对红外线的透过率大于第一预设值；获取调整红外补光强度和切换第一滤光片后图像传感器采集的初始图像；对所述初始图像进行白平衡处理和色彩矫正处理，得到目标图像；本申请通过对背光环境补红外线，可以使在背光环境中采集到的图像更清楚，同时对初始图像进行图像处理，可以消除红外线对图像的影响，使图像更接近真实环境下拍摄的图像，提高了背光场景下拍摄的图像的质量。
Description
技术领域
本申请属于图像处理技术领域，尤其涉及一种图像采集方法、装置及终端设备。
背景技术
随着计算机技术与图像处理技术的飞速发展，且由于人脸是唯一且不易复制的身份特征，利用人脸抓拍实现身份识别在公共安全领域得到广泛应用。
目前，使用的图像传感器可拍摄的动态范围在60～70db，由于环境的多变性，现实中的场景多超过100db，导致在背光或阴暗环境下采集到的图像人脸偏暗、色彩失真或噪点过大，为身份识别造成困难。
为了克服上述问题，目前采用多帧宽动态技术，将相同场景不同曝光时间的图像合成为一帧，从而提高采集的图像质量，但是上述方法在运动物体的边缘也会出现不清楚的问题，使通过图像传感器采集的图像质量差，影响图像识别，降低了安防效果。
发明内容
本申请实施例提供了一种图像处理方法、装置及终端设备，可以解决图像质量差的问题。
第一方面，本申请实施例提供了一种图像处理方法，包括：
获取场景类型；
若所述场景类型为背光场景，发出第一指令，所述第一指令用于指示调整红外灯补光强度和切换第一滤光片，其中，所述第一滤光片对红外线的透过率大于第一预设值；
获取调整红外灯补光强度和切换第一滤光片后图像传感器采集的初始图像；
对所述初始图像进行图像处理，得到目标图像，其中所述图像处理包括以下至少一项处理：白平衡处理和色彩矫正处理。
第二方面，本申请实施例提供了一种图像采集装置，包括：
类型获取模型，用于获取场景类型；
指令发送模块，用于若所述场景类型为背光场景，发出第一指令，所述第一指令用于指示调整红外灯补光强度和切换第一滤光片，其中，所述第一滤光片对红外线的透过率大于第一预设值；
图像获取模块，用于获取调整红外灯补光强度和切换第一滤光片后图像传感器采集的初始图像；
图像处理模块，用于对所述初始图像进行图像处理，得到目标图像，其中所述图像处理包括以下至少一项处理：白平衡处理和色彩矫正处理。
第三方面，本申请实施例提供了一种终端设备，包括：存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现上述第一方面中任一项所述的图像采集方法。
第四方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现上述第一方面中任一项所述的图像采集方法。
第五方面，本申请实施例提供了一种计算机程序产品，当计算机程序产品在终端设备上运行时，使得终端设备执行上述第一方面中任一项所述的图像采集方法。
可以理解的是，上述第二方面至第五方面的有益效果可以参见上述第一方面中的相关描述，在此不再赘述。
本申请实施例与现有技术相比存在的有益效果是：本申请通过对背光场景进行红外线补光，通过第一滤光片将红外线透过，使图像传感器可以接收到红外线，图像传感器形成图像时是根据可见光和红外线成像的，最后对图像传感器采集到的初始图像进行白平衡和色彩矫正处理，得到目标图像；本申请通过对背光环境进行红外线补光，可以使在背光场景中采集到的图像更清楚，同时对初始图像进行图像处理，可以消除红外线对图像的影响，使图像更接近真实环境下拍摄的图像，提高了背光场景下拍摄的图像的质量。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本申请一实施例提供的图像采集方法的应用场景示意图；
图2是本申请一实施例提供的图像采集方法的流程示意图；
图3是本申请一实施例提供的CMOS图像传感器的感光特性曲线示意图；
图4是本申请一实施例提供的第一滤光片对光的透过率曲线示意图；
图5是本申请一实施例提供的图像处理的流程示意图；
图6是本申请一实施例提供的图像采集装置的结构示意图；
图7是本申请一实施例提供的终端设备的结构示意图；
图8是本申请一实施例提供的计算机的部分结构的框图。
具体实施方式
以下描述中，为了说明而不是为了限定，提出了诸如特定系统结构、技术之类的具体细节，以便透彻理解本申请实施例。然而，本领域的技术人员应当清楚，在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中，省略对众所周知的系统、装置、电路以及方法的详细说明，以免不必要的细节妨碍本申请的描述。
应当理解，当在本申请说明书和所附权利要求书中使用时，术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解，在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
如在本申请说明书和所附权利要求书中所使用的那样，术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地，短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。
另外，在本申请说明书和所附权利要求书的描述中，术语“第一”、“第二”、“第三”等仅用于区分描述，而不能理解为指示或暗示相对重要性。
在本申请说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本申请的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此，在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例，而是意味着“一个或多个但不是所有的实施例”，除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”，除非是以其他方式另外特别强调。
动态范围指的是一个物理量的最高值和最低值之间的范围，图像传感器的动态范围可用最大非饱和输入信号与最小可测信号的标准偏差的比值表示，反映了图像传感器能够探测到的最强光信号和最弱光信号。
图像传感器是通过光电转换进行图像采集的，物理压缩场景的动态范围就是减弱场景中亮区的亮度并增强场景中暗区的亮度，目前减弱场景中亮区的亮度而不减弱暗区的亮度还不能实现，本文是通过增强场景中暗区的亮度而不增强或很小增强场景中亮区的亮度来实现物理压缩场景的动态范围的。
图1为本申请实施例提供的图像采集方法的应用场景示意图，上述图像采集方法可以用于图像的采集和处理。其中，图像传感器10用于采集补光环境和没有补光的环境下的图像，处理器20用于获取图像传感器10中的图像，处理器20先根据没有补光的环境下的图像传感器10采集的图像确定场景类型，并根据场景类型控制是否补红外线光，如果不需要补光，则处理器20直接对没有补光的环境下的图像进行处理，得到目标图像；如果需要补光，则控制补光灯进行补光，并获取补光环境下采集的图像，并对图像进行处理，得到目标图像。
以下结合图1对本申请实施例的图像采集方法进行详细说明。
图2示出了本申请提供的图像采集方法的示意性流程图，参照图2，对该方法的详述如下：
S101，获取场景类型。
在本实施例中，场景类型可以包括向光场景、背光场景、人脸背光场景、人脸向光场景和夜间场景等。
向光场景指的是当前场景比较明亮，不存在比较阴暗的区域。背光场景指的是当前场景比较暗，存在暗区。人脸背光场景指的是场景中存在人脸，且人脸处于背光状态，人脸比较暗。人脸向光场景指的是场景中存在人脸，且人脸处于向光状态，人脸比较亮。
S102，若所述场景类型为背光场景，发出第一指令，所述第一指令用于指示调整红外灯补光强度和切换第一滤光片，其中，所述第一滤光片对红外线的透过率大于第一预设值。
在本实施例中，如果当前场景是背光场景，则说明当前场景中有暗区，或者当前场景处于光线较暗的环境中，需要对当前环境进行补光，使图像传感器采集到的图像较清楚，还可以根据场景中背光程度，调整补光的强度，例如，如果背光程度为一级，则开一个红外灯，如果背光程度在三级，则开三个红外灯。
在本实施例中，采用红外灯对当前场景进行红外线补光，而不使用可见光，因为如果补可见光会造成光污染，所以补不可见的红外线避免了光污染。
在本实施例中，光在空气中的传播特性是光传播距离越远光强度越差，光强度反比于物体与光源的距离，即
i1为第一物体接收到的光强度；i2为第二物体接收到的光强度；d1为第一物体与光源的举例；d2为第二物体与光源的举例。背光场景的特点是场景中的暗区一般处于距离摄像机较近的位置，亮区一般处于距离摄像机较远的位置。因此，结合上述光的传播特性和背光场景特性，本申请将红外灯设置在摄像机上或直接由摄像机发出红外线，这样就可以增强场景中暗区的亮度，而不增强场景中亮区的亮度。
在本实施例中，当时背光场景时发送第一指令，第一指令用于控制打开红外灯，还用于切换滤光片，在背光场景中使用第一滤光片。第一滤光片设置在图像传感器前方，光先通过第一滤光片，然后进入到图像传感器，图像传感器根据接收到的光生成图像。图像传感器前方可以设置不同的滤光片，通过切换图像传感器前方的滤光片，采集不同场景下的图像。
因为红外线会影响图片的质量，现有的滤光片是将红外线完全截止的或只透过微少的红外线，本申请主动补充红外线，第一滤光片是在有红外灯补光时使用的，第一滤光片可以透过可见光和红外线，所以要提高第一滤光片对红外线的透过率。第一预设值可以是40％、45％等。
S103，获取调整红外灯补光强度和切换第一滤光片后图像传感器采集的初始图像。
在本实施例中，红外灯发出的红外线的波长为850nm-940nm，由图3中CMOS图像传感器的感光特性曲线可得，CMOS图像传感器对绿色光的感光值最高，其次是红色光和蓝色光，且对大于850nm的光的感光值相同，所以，本申请选取850nm-940nm的红外线可以使CMOS图像传感器对红外线中的红色光、绿色光和蓝色光的感光值相同，使计算更简便。
在本实施例中，如图4所示第一滤光片对光的透过率曲线，第一滤光片的透光特性包括：第一滤光片对蓝色光的透过率为95％-98％，对红色光的透过率为10％-70％，对绿色光的透过率为15％-60％，对红外线的透过率为50％-97％。第一滤光片既保证了可见光的透过率，又能使红外线的透过增多。上述第一滤光片的透光特性可以满足白平衡的特性，因为使用上述第一滤光片的透光特性，可以保证图像传感器对可见光中红色光的感光值、对绿色光的感光值和对蓝色光的感光值相同，在对可见光中三色感光值相同，且图像传感器对红外线中三色光的感光值相同的情况下，只需让白平衡中三色光的增益值相同即可实现白平衡处理。
S104，对所述初始图像进行图像处理，得到目标图像，其中所述图像处理包括以下至少一项处理：白平衡处理和色彩矫正处理。
在本实施例中，由于红外线会影响图像传感器成像时图像的色调和色彩，所以现有技术都是将红外线通过滤光片过滤去除的，本申请主动进行红外线补光，所以在图像传感器成像后，需要对图像进行处理，以消除红外线对图像的影响。
如图5所示，在一种可能的实现方式中，步骤S104的实现过程可以包括：
S1041，基于白平衡计算模型对所述初始图像进行白平衡处理，得到第一候选图像。
在本实施例中，白平衡计算模型包括：
其中，
为第一候选图像，
为初始图像，Rgain为白平衡处理时红色光通道的增益值，Ggain为白平衡处理时绿色光通道的增益值，Bgain为白平衡处理时蓝色光通道的增益值，且Rgain＝Ggain＝Bgain，r为图像传感器对可见光中红色光的感光值，g为图像传感器对可见光中绿色光的感光值，b为图像传感器对可见光中蓝色光的感光值，r′为图像传感器对红外线中红色光的感光值，g′为图像传感器对红外线中绿色光的感光值，b′为图像传感器对红外线中蓝色光的感光值。
由于Rgain＝Ggain＝Bgain，r＝b＝g，r′＝b′＝g′实现了对图像白平衡的处理。保证了图像的色调。
S1042，基于色彩矫正模型对所述第一候选图像进行色彩矫正处理，得到第二候选图像。
在本实施例中，利用色彩矫正模型可以对白平衡后的图像进行色彩矫正。
在本实施例中，色彩矫正模型包括：
其中，
为色彩矫正系数，色彩矫正系数满足a00+a01+a02＝a10+a11+a12＝a20+a21+a22＝1，
为第二候选图像，
为第一候选图像。
色彩矫正系数满足a00+a01+a02＝a10+a11+a12＝a20+a21+a22＝1可以保证经过色彩矫正后的图像的色调不变。
S1043，提高所述第二候选图像的饱和度，得到所述目标图像。
在本实施例中，经过白平衡和色彩矫正后的第二候选图像可以通过HSI颜色模型进行检验，检验色调和饱和度是不是发生变化。
HSI颜色模型中色调公式为：
其中，H为色调，由色调公式可以得到，要想保持色调不变，需要满足以下条件：
a00r′Rgain+a01g′RGgain+a02b′Bgain＝a10r′Rgain+a11g′Ggain+a12b′Bgain
＝a20r′Rgain+a21g′Ggain+a22b′Bgain
由于r′＝b′＝g′，Rgain＝Ggain＝Bgain所以，只需要a00+a01+a02＝a10+a11+a12＝a20+a21+a22即可，又因为a00+a01+a02＝a10+a11+a12＝a20+a21+a22＝1，所以满足色调不变的条件，经过色彩矫正后的图像的色调是不变的。
HSI颜色模型中饱和度公式为：
由于r′＝b′＝g′＝l，所以
从上述S中可得，饱和度比没有红外线补光时的饱和度变小了，所以需要提高第二候选图像的饱和度。具体的饱和度提高多少可以根据H＝S′-S确定，H为饱和度提高的值，S为第二候选图像的饱和度，S′为无红外线补光时图像的饱和度。
本申请实施例中，通过对背光场景进行红外线补光，可以使图像传感器通过接收可见光和红外线采集背光场景的图像，对图像传感器采集的图像进行图像处理，可以消除红外线对图像的影响，使图像更接近现实环境的场景，本申请可以使采集的背光场景中的图像更清楚。
在一种可能的实现方式中，步骤S101的实现过程可以包括：
S1011，获取检测图像，其中，所述检测图像为在第二滤光片下所述图像传感器采集的图像，所述第二滤光片对所述红外线的透过率小于第二预设值，所述第二预设值小于第一预设值。
在本实施例中，第二滤光片只可以透过可见光，或可以透过微少的红外线，第二预设值可以是5％或3％等，但是必须保证第二滤光片对红外线的透过率远小于第一滤光片对红外线的透过率。
由于第二滤光片只能透过可见光，所以图像传感器在第二滤光片下采集的检测图像是真实环境中的图像，通过分析检测图像可以确定当前场景是否为背光场景。
S1012，根据所述检测图像，确定场景类型。
在本实施例中，通过统计的检测图像的特征信息，例如，直方图分布信息、场景明暗对比信息、曝光信息、人脸亮度信息等，判断场景是否背光、背光程度，并将场景进行分类，得到场景类型。
如果通过检测图像确定场景类型不是背光场景，则可以直接对检测图像进行处理得到目标图像。
应理解，上述实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本申请实施例的实施过程构成任何限定。
对应于上文实施例所述的图像采集方法，图6示出了本申请实施例提供的图像采集装置的结构框图，为了便于说明，仅示出了与本申请实施例相关的部分。
参照图6，该装置200可以包括：类型获取模型210、指令发送模块220、图像获取模块230和图像处理模块240。
其中，类型获取模型210，用于获取场景类型；
指令发送模块220，用于若所述场景类型为背光场景，发出第一指令，所述第一指令用于指示调整红外灯补光强度和切换第一滤光片，其中，所述第一滤光片对红外线的透过率大于第一预设值；
图像获取模块230，用于获取调整红外灯补光强度和切换第一滤光片后图像传感器采集的初始图像；
图像处理模块240，用于对所述初始图像进行图像处理，得到目标图像，其中所述图像处理包括以下至少一项处理：白平衡处理和色彩矫正处理。
在一种可能的实现方式中，所述红外线的波长为850nm-940nm。
在一种可能的实现方式中，所述第一滤光片对蓝色光的透过率为95％-98％，对红色光的透过率为10％-70％，对绿色光的透过率为15％-60％，对红外线的透过率为50％-97％。
在一种可能的实现方式中，图像处理模块240具体可以用于：
基于白平衡计算模型对所述初始图像进行白平衡处理，得到第一候选图像；
基于色彩矫正模型对所述第一候选图像进行色彩矫正处理，得到第二候选图像；
提高所述第二候选图像的饱和度，得到所述目标图像。
在一种可能的实现方式中，所述白平衡计算模型包括：
其中，
为第一候选图像，
为初始图像，Rgain为白平衡处理时红色光通道的增益值，Ggain为白平衡处理时绿色光通道的增益值，Bgain为白平衡处理时蓝色光通道的增益值，且Rgain＝Ggain＝Bgain，r为图像传感器对可见光中红色光的感光值，g为图像传感器对可见光中绿色光的感光值，b为图像传感器对可见光中蓝色光的感光值，r′为图像传感器对红外线中红色光的感光值，g′为图像传感器对红外线中绿色光的感光值，b′为图像传感器对红外线中蓝色光的感光值。
在一种可能的实现方式中，所述色彩矫正模型包括：
其中，
为色彩矫正系数，色彩矫正系数满足a00+a01+a02＝a10+a11+a12＝a20+a21+a22＝1，
为第二候选图像，
为第一候选图像。
在一种可能的实现方式中，类型获取模型210具体可以用于：
获取检测图像，其中，所述检测图像为在第二滤光片下所述图像传感器采集的图像，所述第二滤光片对所述红外线的透过率小于第二预设值，所述第二预设值小于第一预设值；
根据所述检测图像，确定场景类型。
需要说明的是，上述装置/单元之间的信息交互、执行过程等内容，由于与本申请方法实施例基于同一构思，其具体功能及带来的技术效果，具体可参见方法实施例部分，此处不再赘述。
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将所述装置的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中，上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。另外，各功能单元、模块的具体名称也只是为了便于相互区分，并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
本申请实施例还提供了一种终端设备，参见图7，该终端设400可以包括：至少一个处理器410、存储器420以及存储在所述存储器420中并可在所述至少一个处理器410上运行的计算机程序，所述处理器410执行所述计算机程序时实现上述任意各个方法实施例中的步骤，例如图2所示实施例中的步骤S101至步骤S104。或者，处理器410执行所述计算机程序时实现上述各装置实施例中各模块/单元的功能，例如图6所示模块210至240的功能。
示例性的，计算机程序可以被分割成一个或多个模块/单元，一个或者多个模块/单元被存储在存储器420中，并由处理器410执行，以完成本申请。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序段，该程序段用于描述计算机程序在终端设备400中的执行过程。
本领域技术人员可以理解，图7仅仅是终端设备的示例，并不构成对终端设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如输入输出设备、网络接入设备、总线等。
处理器410可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
存储器420可以是终端设备的内部存储单元，也可以是终端设备的外部存储设备，例如插接式硬盘，智能存储卡(Smart Media Card，SMC)，安全数字(Secure Digital，SD)卡，闪存卡(Flash Card)等。所述存储器420用于存储所述计算机程序以及终端设备所需的其他程序和数据。所述存储器420还可以用于暂时地存储已经输出或者将要输出的数据。
总线可以是工业标准体系结构(Industry Standard Architecture，ISA)总线、外部设备互连(Peripheral Component，PCI)总线或扩展工业标准体系结构(ExtendedIndustry Standard Architecture，EISA)总线等。总线可以分为地址总线、数据总线、控制总线等。为便于表示，本申请附图中的总线并不限定仅有一根总线或一种类型的总线。
本申请实施例提供的图像采集方法可以应用于计算机、平板电脑、笔记本电脑、上网本、个人数字助理(personal digital assistant，PDA)等终端设备上，本申请实施例对终端设备的具体类型不作任何限制。
以所述终端设备为计算机为例。图8示出的是与本申请实施例提供的计算机的部分结构的框图。参考图8，计算机包括：通信电路510、存储器520、输入单元530、显示单元540、音频电路550、无线保真(wireless fidelity，WiFi)模块560、处理器570以及电源580等部件。
下面结合图8对计算机的各个构成部件进行具体的介绍：
通信电路510可用于收发信息或通话过程中，信号的接收和发送，特别地，将图像采集设备发送的图像样本接收后，给处理器570处理；另外，将图像采集指令发送给图像采集设备。通常，通信电路包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(Low Noise Amplifier，LNA)、双工器等。此外，通信电路510还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议，包括但不限于全球移动通讯系统(Global System of Mobile communication，GSM)、通用分组无线服务(GeneralPacket Radio Service，GPRS)、码分多址(Code Division Multiple Access，CDMA)、宽带码分多址(Wideband Code Division Multiple Access,WCDMA)、长期演进(Long TermEvolution,LTE))、电子邮件、短消息服务(Short Messaging Service，SMS)等。
存储器520可用于存储软件程序以及模块，处理器570通过运行存储在存储器520的软件程序以及模块，从而执行计算机的各种功能应用以及数据处理。存储器520可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据计算机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器520可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
输入单元530可用于接收输入的数字或字符信息，以及产生与计算机的用户设置以及功能控制有关的键信号输入。具体地，输入单元530可包括触控面板531以及其他输入设备532。触控面板531，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板531上或在触控面板531附近的操作)，并根据预先设定的程式驱动相应的连接装置。可选的，触控面板531可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器570，并能接收处理器570发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板531。除了触控面板531，输入单元530还可以包括其他输入设备532。具体地，其他输入设备532可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
显示单元540可用于显示由用户输入的信息或提供给用户的信息以及计算机的各种菜单。显示单元540可包括显示面板541，可选的，可以采用液晶显示器(Liquid CrystalDisplay，LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板541。进一步的，触控面板531可覆盖显示面板541，当触控面板531检测到在其上或附近的触摸操作后，传送给处理器570以确定触摸事件的类型，随后处理器570根据触摸事件的类型在显示面板541上提供相应的视觉输出。虽然在图8中，触控面板531与显示面板541是作为两个独立的部件来实现计算机的输入和输入功能，但是在某些实施例中，可以将触控面板531与显示面板541集成而实现计算机的输入和输出功能。
音频电路550可提供用户与计算机之间的音频接口。音频电路550可将接收到的音频数据转换后的电信号，传输到扬声器由扬声器转换为声音信号输出；另一方面，传声器将收集的声音信号转换为电信号，由音频电路550接收后转换为音频数据，再将音频数据输出处理器570处理后，经通信电路510以发送给比如另一计算机，或者将音频数据输出至存储器520以便进一步处理。
WiFi属于短距离无线传输技术，计算机通过WiFi模块560可以帮助用户收发电子邮件、浏览网页和访问流式媒体等，它为用户提供了无线的宽带互联网访问。虽然图8示出了WiFi模块560，但是可以理解的是，其并不属于计算机的必须构成，完全可以根据需要在不改变发明的本质的范围内而省略。
处理器570是计算机的控制中心，利用各种接口和线路连接整个计算机的各个部分，通过运行或执行存储在存储器520内的软件程序和/或模块，以及调用存储在存储器520内的数据，执行计算机的各种功能和处理数据，从而对计算机进行整体监控。可选的，处理器570可包括一个或多个处理单元；优选的，处理器570可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器570中。
计算机还包括给各个部件供电的电源580(比如电池)，优选的，电源580可以通过电源管理系统与处理器570逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
本申请实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现可实现上述图像采集方法各个实施例中的步骤。
本申请实施例提供了一种计算机程序产品，当计算机程序产品在移动终端上运行时，使得移动终端执行时实现可实现上述图像采集方法各个实施例中的步骤。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请实现上述实施例方法中的全部或部分流程，可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质至少可以包括：能够将计算机程序代码携带到拍照装置/终端设备的任何实体或装置、记录介质、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，RandomAccess Memory)、电载波信号、电信信号以及软件分发介质。例如U盘、移动硬盘、磁碟或者光盘等。在某些司法管辖区，根据立法和专利实践，计算机可读介质不可以是电载波信号和电信信号。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述或记载的部分，可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
在本申请所提供的实施例中，应该理解到，所揭露的装置/网络设备和方法，可以通过其它的方式实现。例如，以上所描述的装置/网络设备实施例仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口，装置或单元的间接耦合或通讯连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
以上所述实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围，均应包含在本申请的保护范围之内。
Claims (7)
1.一种图像采集方法，其特征在于，包括：
获取场景类型，所述场景类型为向光场景、背光场景、人脸背光场景、人脸向光场景或夜间场景；
若所述场景类型为背光场景，发出第一指令，所述第一指令用于指示调整红外灯补光强度和切换第一滤光片，其中，所述第一滤光片对红外线的透过率大于第一预设值，图像传感器前方可以设置不同的滤光片，通过切换图像传感器前方的滤光片，采集不同场景下的图像，所述红外补光强度基于场景中背光程度调整；
获取调整红外灯补光强度和切换第一滤光片后图像传感器采集的初始图像；
对所述初始图像进行图像处理，得到目标图像，其具体包括：基于白平衡计算模型对所述初始图像进行白平衡处理，得到第一候选图像；
基于色彩矫正模型对所述第一候选图像进行色彩矫正处理，得到第二候选图像；
提高所述第二候选图像的饱和度，得到所述目标图像，其中，所述图像处理包括以下至少一项处理：白平衡处理和色彩矫正处理；
所述白平衡计算模型包括：
其中，
为第一候选图像，
为初始图像，Rgain为白平衡处理时红色光通道的增益值，Ggain为白平衡处理时绿色光通道的增益值，Bgain为白平衡处理时蓝色光通道的增益值，且Rgain＝Ggain＝BVain，r为图像传感器对可见光中红色光的感光值，g为图像传感器对可见光中绿色光的感光值，b为图像传感器对可见光中蓝色光的感光值，r′为图像传感器对红外线中红色光的感光值，g′为图像传感器对红外线中绿色光的感光值，b′为图像传感器对红外线中蓝色光的感光值；
所述色彩矫正模型包括：
其中，
为色彩矫正系数，色彩矫正系数满足a00+a01+a02＝a10+a11+a12＝a20+a21+a22＝1，
为第二候选图像，
为第一候选图像。
2.如权利要求1所述的图像采集方法，其特征在于，所述红外线的波长为850nm-940nm。
3.如权利要求1所述的图像采集方法，其特征在于，所述第一滤光片对蓝色光的透过率为95％-98％，对红色光的透过率为10％-70％，对绿色光的透过率为15％-60％，对红外线的透过率为50％-97％。
4.如权利要求1所述的图像采集方法，其特征在于，所述获取场景类型，包括：
获取检测图像，其中，所述检测图像为在第二滤光片下所述图像传感器采集的图像，所述第二滤光片对所述红外线的透过率小于第二预设值，所述第二预设值小于第一预设值；
根据所述检测图像，确定场景类型。
5.一种图像采集装置，其特征在于，包括：
类型获取模型，用于获取场景类型，所述场景类型为向光场景、背光场景、人脸背光场景、人脸向光场景或夜间场景；
指令发送模块，用于若所述场景类型为背光场景，发出第一指令，所述第一指令用于指示调整红外灯补光强度和切换第一滤光片，其中，所述第一滤光片对红外线的透过率大于第一预设值，图像传感器前方可以设置不同的滤光片，通过切换图像传感器前方的滤光片，采集不同场景下的图像，所述红外补光强度基于场景中背光程度调整；
图像获取模块，用于获取调整红外灯补光强度和切换第一滤光片后图像传感器采集的初始图像；
图像处理模块，用于对所述初始图像进行图像处理，得到目标图像，其具体包括：基于白平衡计算模型对所述初始图像进行白平衡处理，得到第一候选图像；
基于色彩矫正模型对所述第一候选图像进行色彩矫正处理，得到第二候选图像；
提高所述第二候选图像的饱和度，得到所述目标图像，其中所述图像处理包括以下至少一项处理：白平衡处理和色彩矫正处理；
所述白平衡计算模型包括：
其中，
为第一候选图像，
为初始图像，Rgain为白平衡处理时红色光通道的增益值，Ggain为白平衡处理时绿色光通道的增益值，Bgain为白平衡处理时蓝色光通道的增益值，且Rgain＝Ggain＝Bgain，r为图像传感器对可见光中红色光的感光值，g为图像传感器对可见光中绿色光的感光值，b为图像传感器对可见光中蓝色光的感光值，r′为图像传感器对红外线中红色光的感光值，g′为图像传感器对红外线中绿色光的感光值，b′为图像传感器对红外线中蓝色光的感光值；
所述色彩矫正模型包括：
其中，
为色彩矫正系数，色彩矫正系数满足a00+a01+a02＝a10+a11+a12＝a20+a21+a22＝1，
为第二候选图像，
为第一候选图像。
6.一种终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至4任一项所述的图像采集方法。
7.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至4任一项所述的图像采集方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010351661.4A CN111614894B (zh) | 2020-04-28 | 2020-04-28 | 一种图像采集方法、装置及终端设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010351661.4A CN111614894B (zh) | 2020-04-28 | 2020-04-28 | 一种图像采集方法、装置及终端设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111614894A CN111614894A (zh) | 2020-09-01 |
| CN111614894B true CN111614894B (zh) | 2022-04-01 |
Family
ID=72201183
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010351661.4A Active CN111614894B (zh) | 2020-04-28 | 2020-04-28 | 一种图像采集方法、装置及终端设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111614894B (zh) |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112220448B (zh) * | 2020-10-14 | 2022-04-22 | 北京鹰瞳科技发展股份有限公司 | 眼底相机及眼底图像合成方法 |
| CN112333359B (zh) * | 2020-10-28 | 2022-09-16 | 维沃移动通信（杭州）有限公司 | 图像处理方法、装置及电子设备 |
| CN112954224A (zh) * | 2021-03-26 | 2021-06-11 | 维沃移动通信有限公司 | 拍摄方法及装置、电子设备、可读存储介质和芯片 |
| CN113364996A (zh) * | 2021-06-04 | 2021-09-07 | 巽腾(广东)科技有限公司 | 基于lcd多晶元板的图像生成方法、装置、设备和存储介质 |
| CN113766128B (zh) * | 2021-09-09 | 2023-08-01 | 苏州华兴源创科技股份有限公司 | 图像处理装置、方法和成像设备 |
| CN117710265A (zh) * | 2022-01-25 | 2024-03-15 | 荣耀终端有限公司 | 图像处理方法及其相关设备 |
| CN114842579B (zh) * | 2022-04-26 | 2024-02-20 | 深圳市凯迪仕智能科技股份有限公司 | 智能锁、图像处理方法及相关产品 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105389571A (zh) * | 2015-12-08 | 2016-03-09 | 东莞市中控电子技术有限公司 | 一种图像采集的系统以及图像采集的方法 |
| CN107197163A (zh) * | 2017-07-19 | 2017-09-22 | 中科和光（天津）应用激光技术研究所有限公司 | 一种基于海思芯片的安全执法装置 |
| CN109672828A (zh) * | 2019-01-04 | 2019-04-23 | 深圳英飞拓科技股份有限公司 | 基于光路白平衡的低照度提升装置及低照度提升方法 |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2015127594A1 (zh) * | 2014-02-26 | 2015-09-03 | 华为终端有限公司 | 一种拍摄补光的控制方法、装置及终端 |
| CN106791337B (zh) * | 2017-02-22 | 2023-05-12 | 北京汉邦高科数字技术股份有限公司 | 一种双镜头光学倍数拓展的变焦摄像机及其工作方法 |
-
2020
- 2020-04-28 CN CN202010351661.4A patent/CN111614894B/zh active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105389571A (zh) * | 2015-12-08 | 2016-03-09 | 东莞市中控电子技术有限公司 | 一种图像采集的系统以及图像采集的方法 |
| CN107197163A (zh) * | 2017-07-19 | 2017-09-22 | 中科和光（天津）应用激光技术研究所有限公司 | 一种基于海思芯片的安全执法装置 |
| CN109672828A (zh) * | 2019-01-04 | 2019-04-23 | 深圳英飞拓科技股份有限公司 | 基于光路白平衡的低照度提升装置及低照度提升方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111614894A (zh) | 2020-09-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111614894B (zh) | 一种图像采集方法、装置及终端设备 | |
| CN108307125B (zh) | 一种图像采集方法、装置和存储介质 | |
| CN110136183B (zh) | 一种图像处理的方法、装置以及摄像装置 | |
| CN107707827B (zh) | 一种高动态图像拍摄方法及移动终端 | |
| CN107038715B (zh) | 一种图像处理方法及装置 | |
| CN104517268B (zh) | 调整图像亮度的方法及装置 | |
| CN107438163B (zh) | 一种拍照方法、终端及计算机可读存储介质 | |
| CN105450923A (zh) | 图像处理方法、图像处理装置以及电子设备 | |
| RU2704724C1 (ru) | Способ и устройство для отображения изображения интерфейса | |
| CN103190144B (zh) | 兴趣区提取 | |
| CN111510698A (zh) | 图像处理方法、装置、存储介质及移动终端 | |
| US20210141878A1 (en) | Unlocking control method and related products | |
| CN108932696B (zh) | 信号灯的光晕抑制方法及装置 | |
| US11783450B2 (en) | Method and device for image processing, terminal device and storage medium | |
| CN105791790B (zh) | 图像处理方法及装置 | |
| CN113129222A (zh) | 颜色阴影校正方法、终端设备及计算机可读存储介质 | |
| CN111901519B (zh) | 屏幕补光方法、装置及电子设备 | |
| WO2020001189A1 (zh) | 屏幕补光校正方法、装置、可读存储介质及移动终端 | |
| CN114143523B (zh) | 亮度调节方法、装置、投影设备及存储介质 | |
| WO2022267506A1 (zh) | 图像融合方法、电子设备、存储介质及计算机程序产品 | |
| CN115701128A (zh) | 一种图像处理方法及相关设备 | |
| CN111868779A (zh) | 一种显示控制的方法及电子设备 | |
| CN112070096B (zh) | 颜色识别方法、装置、终端设备和存储介质 | |
| CN115619671A (zh) | 图像降噪方法及装置、设备、存储介质 | |
| CN113676663B (zh) | 相机白平衡调整方法、装置、存储介质及终端设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20230324 Address after: 518000 Yingfei Haocheng Science Park, Guansheng 5th Road, Luhu Community, Guanhu Street, Longhua District, Shenzhen, Guangdong 1515 Patentee after: Shenzhen Infineon Information Co.,Ltd. Address before: 518000 Room 301, Infineon Technology Co., Ltd., No. 12, Guanbao Road, Luhu community, Guanhu street, Longhua District, Shenzhen City, Guangdong Province Patentee before: SHENZHEN INFINOVA INTELLIGENT TECHNOLOGY Co.,Ltd. |
|
| TR01 | Transfer of patent right |