CN111526342B - 图像处理方法、装置、摄像头、终端和存储介质 - Google Patents

图像处理方法、装置、摄像头、终端和存储介质 Download PDF

Info

Publication number
CN111526342B
CN111526342B CN202010343123.0A CN202010343123A CN111526342B CN 111526342 B CN111526342 B CN 111526342B CN 202010343123 A CN202010343123 A CN 202010343123A CN 111526342 B CN111526342 B CN 111526342B
Authority
CN
China
Prior art keywords
image
preset
resolution
color image
color
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010343123.0A
Other languages
English (en)
Other versions
CN111526342A (zh
Inventor
王军
王少鸣
郭润增
洪哲鸣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202010343123.0A priority Critical patent/CN111526342B/zh
Publication of CN111526342A publication Critical patent/CN111526342A/zh
Application granted granted Critical
Publication of CN111526342B publication Critical patent/CN111526342B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)

Abstract

本发明实施例公开了一种图像处理方法、装置、摄像头、终端和存储介质;本发明实施例可以在接收到采集指令时,执行彩色图像采集操作,得到第一预设参数的彩色图像;当采集指令为第一采集指令时,基于第一预设参数的彩色图像进行第一类图像处理;当采集指令为第二采集指令时,执行深度图像采集操作,得到第二预设参数的深度图像;对第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像;基于第二预设参数的深度图像和第二预设参数的彩色图像进行第二类图像处理。本发明可在不同的采集指令下,均采用相同的参数来采集彩色图像,仅在第二采集指令时调整彩色图像的参数,便于第二类图像处理。由此,本方案可以提升图像处理的效率。

Description

图像处理方法、装置、摄像头、终端和存储介质
技术领域
本发明涉及图像处理领域,具体涉及一种图像处理方法、装置、摄像头、终端和存储介质。
背景技术
身份识别技术是一种利用计算机识别对象身份的生物特征识别技术。随着目前智能终端、电子支付以及物联网的普及,身份识别技术已在日常生活中大范围应用。目前的身份识别技术具有多种,比如,目前可以采用人脸识别(Face Recognition)、指纹识别、声纹识别、条码识别、虹膜识别、个人密码等技术识别对象的身份。
目前在采用不同的基于图像的身份识别技术进行身份识别时,往往需要采用设备中不同的传感器来进行图像采集,然而,该方法会延长图像采集的时间,由此,目前的图像处理方法效率低下。
发明内容
本发明实施例提供一种图像处理方法、装置、摄像头、终端和存储介质,可以提升图像处理的效率。
本发明实施例提供一种图像处理方法,包括:
在接收到采集指令时,执行彩色图像采集操作,得到第一预设参数的彩色图像;
当所述采集指令为第一采集指令时,基于所述第一预设参数的彩色图像进行第一类图像处理;
当所述采集指令为第二采集指令时,执行深度图像采集操作,得到第二预设参数的深度图像;
对所述第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像;
基于所述第二预设参数的深度图像和所述第二预设参数的彩色图像进行第二类图像处理。
本发明实施例还提供一种图像处理装置,包括:
采集彩色单元,用于在接收到采集指令时,执行彩色图像采集操作,得到第一预设参数的彩色图像;
第一处理单元,用于当所述采集指令为第一采集指令时,基于所述第一预设参数的彩色图像进行第一类图像处理;
采集深度单元,用于当所述采集指令为第二采集指令时,执行深度图像采集操作,得到第二预设参数的深度图像;
参数调整单元,用于对所述第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像;
第二处理单元,用于基于所述第二预设参数的深度图像和所述第二预设参数的彩色图像进行第二类图像处理。
在一些实施例中,所述第一预设参数包括第一预设分辨率,所述第二预设参数包括第二预设分辨率,所述第二采集指令包括人脸识别指令,所述采集深度单元,包括采集深度子单元,其中:
所述采集深度子单元用于当所述采集指令为人脸识别指令时,采用深度传感器采集第二预设分辨率的深度图像,所述深度传感器为传感器模块中感应深度的传感器,所述传感器模块中还包括传感处理器;
在一些实施例中,所述参数调整单元,包括分辨率调整子单元,其中:
所述分辨率调整子单元用于采用所述传感处理器对所述第一预设分辨率的彩色图像进行参数调整处理,得到第二预设分辨率的彩色图像。
在一些实施例中,所述分辨率调整子单元,包括:
映射子模块,用于确定所述传感处理器的分辨率映射关系;
下采样子模块,用于采用所述传感处理器根据所述分辨率映射关系对所述第一预设分辨率的彩色图像进行分辨率下采样处理,得到第二预设分辨率的彩色图像。
在一些实施例中,所述传感器模块中还包括颜色传感器,所述映射子模块用于:
采用所述颜色传感器采集第一预设分辨率的测试图像;
采用所述颜色传感器采集第二预设分辨率的测试图像;
在所述第二预设分辨率的测试图像中确定目标起点像素和目标终点像素;
确定所述目标起点像素和目标终点像素在所述第一预设分辨率的测试图像中的位置;
基于所述目标起点像素和目标终点像素在所述第一预设分辨率的测试图像中的位置确定所述传感处理器的分辨率映射关系。
在一些实施例中,所述第二预设分辨率包括第二预设水平分辨率和第二预设垂直分辨率,所述位置包括水平位置和垂直位置,所述分辨率映射关系包括水平缩放比例和垂直缩放比例,所述映射子模块在用于步骤“基于所述目标起点像素和目标终点像素在所述第一预设分辨率的测试图像中的位置确定所述传感处理器的分辨率映射关系”时,用于:
根据所述目标起点像素在所述第一预设分辨率的测试图像中的水平位置,以及所述目标终点像素在所述第一预设分辨率的测试图像中的水平位置,计算水平分辨率差值;
根据所述水平分辨率差值和所述第二预设水平分辨率计算所述传感处理器的水平缩放比例;
根据所述目标起点像素在所述第一预设分辨率的测试图像中的垂直位置,以及所述目标终点像素在所述第一预设分辨率的测试图像中的垂直位置,计算垂直分辨率差值;
根据所述垂直分辨率差值和所述第二预设垂直分辨率计算所述传感处理器的垂直缩放比例。
在一些实施例中,所述第一预设参数包括第一预设分辨率,所述第一采集指令包括扫码指令,所述采集彩色单元包括采集彩色子单元,其中:
所述采集彩色子单元用于采用颜色传感器采集所述第一预设分辨率的彩色图像,所述颜色传感器为传感器模块中感应颜色的传感器,所述传感器模块中还包括传感处理器;
在一些实施例中,所述第一处理单元,包括:
压缩子单元,用于当所述采集指令为扫码指令时,采用所述传感处理器对所述第一预设分辨率的彩色图像进行图像压缩处理,得到压缩后的第一预设分辨率的彩色图像;
第一处理子单元,用于对所述压缩后的第一预设分辨率的彩色图像进行第一类图像处理。
在一些实施例中,所述彩色图像包括条形码图像所述第一处理子单元,用于:
对所述压缩后的第一预设分辨率的条形码图像进行解码处理,得到解码结果;
根据所述解码结果确定所述第一类图像处理的处理结果。
在一些实施例中,所述深度图像包括人脸深度图像,所述彩色图像包括人脸彩色图像,所述第二处理单元,用于:
基于所述第二预设参数的人脸深度图像和所述第二预设参数的人脸彩色图像进行特征提取,得到面部特征;
在预设特征库中确定所述面部特征对应的身份信息;
根据所述身份信息确定所述第二类图像处理的处理结果。
在一些实施例中,所述第二处理单元,还用于:
当接收到切换指令时,再次执行彩色图像采集操作,得到第一预设参数的更新彩色图像;
基于所述第一预设参数的更新彩色图像进行第一类图像处理。
在一些实施例中,所述第一处理单元,还用于:
当接收到切换指令时,再次执行彩色图像采集操作,得到第一预设参数的更新彩色图像,以及,再次执行深度图像采集操作,得到第二预设参数的更新深度图像;
对所述第一预设参数的更新彩色图像进行参数调整处理,得到第二预设参数的更新彩色图像;
基于所述第二预设参数的更新深度图像和所述第二预设参数的更新彩色图像进行第二类图像处理。
本发明实施例还提供一种摄像头,包括颜色传感器、深度传感器和传感处理器,所述传感处理器中存储有多条指令,其中:
所述颜色传感器用于执行彩色图像采集操作,得到第一预设参数的彩色图像;
所述深度传感器用于执行深度图像采集操作,得到第二预设参数的深度图像;
所述传感处理器用于加载并执行所述指令,以对所述第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像。
本发明实施例还提供一种终端,包括处理器、存储器和摄像头,其中:
所述摄像头用于执行彩色图像采集操作,得到第一预设参数的彩色图像,以及执行深度图像采集操作,得到第二预设参数的深度图像,以及对所述第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像;
所述存储器用于存储图像数据以及多条指令;
所述处理器用于读取所述存储器存储的多条指令,以执行以下步骤:
在接收到采集指令时,控制摄像头执行彩色图像采集操作,得到第一预设参数的彩色图像;
当所述采集指令为第一采集指令时,基于所述第一预设参数的彩色图像进行第一类图像处理;
当所述采集指令为第二采集指令时,控制摄像头执行深度图像采集操作,得到第二预设参数的深度图像;
控制摄像头对所述第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像;
基于所述第二预设参数的深度图像和所述第二预设参数的彩色图像进行第二类图像处理。
在一些实施例中,所述摄像头包括颜色传感器、深度传感器和传感处理器,所述处理器用于读取所述存储器存储的多条指令,以执行以下步骤:
在接收到采集指令时,控制颜色传感器执行彩色图像采集操作,得到第一预设参数的彩色图像;
当所述采集指令为第一采集指令时,基于所述第一预设参数的彩色图像进行第一类图像处理;
当所述采集指令为第二采集指令时,控制深度传感器执行深度图像采集操作,得到第二预设参数的深度图像;
控制传感处理器对所述第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像;
基于所述第二预设参数的深度图像和所述第二预设参数的彩色图像进行第二类图像处理。
本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质存储有多条指令,所述指令适于处理器进行加载,以执行本发明实施例所提供的任一种图像处理方法中的步骤。
本发明实施例可以在接收到采集指令时,执行彩色图像采集操作,得到第一预设参数的彩色图像;当采集指令为第一采集指令时,基于第一预设参数的彩色图像进行第一类图像处理;当采集指令为第二采集指令时,执行深度图像采集操作,得到第二预设参数的深度图像;对第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像;基于第二预设参数的深度图像和第二预设参数的彩色图像进行第二类图像处理。
在本发明中,每接收到一次采集指令,就采集一次第一预设参数的彩色图像,根据采集指令的类型,本发明实施例可以直接进行第一类图像处理,或者,再采集一次第二预设参数的深度图像,并将第一预设参数的彩色图像调整为第二预设参数的彩色图像,从而进行第二类图像处理。
本发明实施例在采集图像时,无需调整采集参数,仅需要对采集的图像进行参数调整,就可以得到符合第二类图像处理的彩色图像。
相比于目前通过调整传感器的采集参数来直接采集符合第二类图像处理要求的彩色图像,本方案可以节省采集图像所需的时间,特别是针对连续进行第一类图像处理和第二类图像处理的情况,本方案无需在调整传感器的采集参数时反复初始化传感器相关的配置,就可以做到连续采集图像、降低采集图像时出现的卡顿、黑屏等情况,提高了在拍摄图片时的对象体验。
由此,本发明提升了图像处理的效率。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1a是本发明实施例提供的图像处理方法的场景示意图;
图1b是本发明实施例提供的图像处理方法的流程示意图;
图1c是本发明实施例提供的图像处理方法的A*B分辨率彩色图片示意图;
图1d是本发明实施例提供的图像处理方法的C*D分辨率彩色图片示意图;
图2是本发明实施例提供的图像处理方法的另一种流程示意图;
图3是本发明实施例提供的图像处理装置的结构示意图;
图4a是本发明实施例提供的摄像头的硬件结构示意图;
图4b是本发明实施例提供的传感器模块结构示意图;
图4c是本发明实施例提供的另一种传感器模块结构示意图;
图5是本发明实施例提供的终端的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例提供图像处理方法、装置、摄像头、终端和存储介质。
在一些实施例中,该图像处理装置具体可以集成在具有摄像头的终端中,该终端可以为手机、刷脸支付设备、平板电脑、检测设备、自助收银机、智能蓝牙设备、笔记本电脑、或者个人电脑(PersonalComputer,PC)等设备。
在一些实施例中,该图像处理装置还可以集成在多个终端中,比如,图像处理装置可以集成在多个自助收银机中,由多个自助收银机来实现本发明的图像处理方法。
在一些实施例中,该图像处理装置还可以集成在摄像头中,该摄像头可以内置有传感器、传感处理器、存储器等功能元件,该摄像头内置的存储器可以存储本发明实施例提供图像处理方法,传感处理器可以从存储器中读取并控制传感器来执行本发明实施例提供图像处理方法。
例如,参考图1a,该终端可以是刷脸支付设备,该刷脸支付设备可以包括传感器模块,该传感器模块可以包括深度传感器、温度传感器、颜色传感器、重力传感器、加速度传感器、陀螺仪、指纹传感器、位置传感器等等,以及可以用于控制这些传感器的传感处理器,等等。
该刷脸支付设备可以接收对象触发的采集指令,在检测到采集指令时,该刷脸支付设备可以执行彩色图像采集操作,得到第一预设参数的彩色图像;当判断采集指令为第一采集指令时,该刷脸支付设备可以基于第一预设参数的彩色图像进行第一类图像处理;当判断采集指令为第二采集指令时,该刷脸支付设备可以执行深度图像采集操作,得到第二预设参数的深度图像;然后,对第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像;最后,基于第二预设参数的深度图像和第二预设参数的彩色图像进行第二类图像处理。
其中,在一些实施例中,该终端可以是用于人工收银台的即插即用的刷脸支付设备,该刷脸支付设备可以同时支持扫码支付和刷脸支付;比如,当接收到扫码支付指令时,该刷脸支付设备可以通过其搭载的摄像头采集第一预设分辨率的二维码图像,该刷脸支付设备可以对该二维码图像进行解码识别,并根据解码识别的结果进行支付;当接收到刷脸支付指令时,该刷脸支付设备可以通过其搭载的摄像头采集第一预设分辨率的人脸彩色图像和第二预设分辨率的人脸深度图像,并将该人脸彩色图像的分辨率从第一预设分辨率调整到第二预设分辨率,以使该人脸彩色的分辨率与人脸深度图像对齐,然后,该刷脸支付设备可以根据第二预设分辨率的人脸彩色图像和第二预设分辨率的人脸深度图像进行人脸识别,并根据人脸识别结果进行支付。
例如,在一些实施例中,当刷脸支付设备接收到扫码支付指令时,刷脸支付设备可以拍摄商品的商品条码,得到500*500分辨率的条码彩色图片,通过识别500*500分辨率的条码彩色图片来确定该商品的价格,从而生成价格清单;当刷脸支付设备接收到刷脸支付指令时,该刷脸支付设备可以拍摄对象的面部,得到500*500分辨率的人脸彩色图片以及200*200分辨率的人脸深度图片,并将该人脸彩色图像的分辨率从500*500调整到200*200,以使该人脸彩色的分辨率与人脸深度图像对齐,然后,该刷脸支付设备可以根据200*200分辨率的人脸彩色图像和200*200分辨率的人脸深度图像进行人脸识别,从而确定对象的身份,身份识别通过后,刷脸支付设备可以按照价格清单进行结账。
以下分别进行详细说明。需说明的是,以下实施例的序号不作为对实施例优选顺序的限定。
在本实施例中,提供了一种图像处理方法,如图1b所示,该图像处理方法的具体流程可以如下:
101、在接收到采集指令时,执行彩色图像采集操作,得到第一预设参数的彩色图像。
其中,采集指令是由对象触发或者终端触发的、用于指示传感器模块进行图像采集的命令,该采集指令可以包括多个指明该指令要完成的操作类型或参数的操作码,以及指明操作对象的内容或所在的存储单元地址的地址码。
其中,颜色传感器为传感器模块中感应颜色、采集颜色信息的传感器,在一些实施例中,传感器模块中还可以包括传感处理器。
其中,传感处理器是通过读取采集指令,并对采集指令译码并执行采集指令的核心部件,具有控制传感器进行采集、控制传感器采集参数以及进行图像处理等功能。
其中,第一预设参数是一种预设的图像采集参数,该图像采集参数可以是图像的分辨率参数、尺寸参数、色深度参数、位深度参数,等等。
该第一预设参数的具体数值可以由采集指令的操作码来决定,也可以从本地内存中读取,还可以由对象设置,等等。
比如,参考表1,表1中包括三个采集指令,其中,采集指令000是一种指示彩色传感器采集一张A*B分辨率的彩色图像的指令;采集指令001指示灰度传感器采集一张X*Y尺寸的灰度图像的指令;采集指令002是一种指示深度传感器采集一张A*B分辨率和X*Y尺寸的灰度图像的指令。
指令编号 操作类型 操作对象
000 采集A*B分辨率的彩色图像 彩色传感器
001 采集X*Y尺寸的灰度图像 灰度传感器
002 采集A*B分辨率和X*Y尺寸的深度图像 深度传感器
表1
在一些实施例中,每当接收到采集指令,不论该指令是哪一种操作类型,都会执行彩色图像采集操作,从而得到第一预设参数的彩色图像。
在一些实施例中,只有在接收到彩色图像的采集指令时,才会执行彩色图像采集操作,从而得到第一预设参数的彩色图像。
在一些实施例中,只有在接收到彩色图像的采集指令或深度图像的采集指令时,才会执行彩色图像采集操作,从而得到第一预设参数的彩色图像。
102、当采集指令为第一采集指令时,基于第一预设参数的彩色图像进行第一类图像处理。
其中,第一采集指令是包含了采集第一预设参数的彩色图像,并对其进行第一类图像处理命令的指令,该具体的第一预设参数、第一类图像处理的指令内容可以由技术人员预先设置,也可以由对象设置,等等。
在一些实施例中,第一预设参数可以是第一预设分辨率,即参数可以是分辨率,该参数(分辨率)的具体预设数值可以由技术人员预先设置,也可以由对象设置等等。
在一些实施例中,第一采集指令可以是高清照相指令,该高清照相指令是一种指示摄像头采集高清的场景图像的指令,比如,高清照相指令可以指示彩色摄像头采集1920*1080分辨率的彩色图像。
在一些实施例中,第一采集指令可以是扫码指令,该扫码指令是一种指示摄像头采集条码图像并识别条码内容的指令,比如,扫码指令可以指示彩色摄像头采集A*B分辨率的条码彩色图像,并识别该条码彩色图像中的条码内容的指令。
比如,在一些实施例中,第一预设参数可以是第一预设分辨率,第一采集指令可以是扫码指令,当采集指令为第一采集指令时,步骤101可以是采用颜色传感器采集第一预设分辨率的彩色图像。
其中,第一预设分辨率可以任一数值的分辨率,该第一预设分辨率可以由对象设置,也可以从本地内存中读取,还可以由传感器自身的参数决定,等等。
例如,第一预设分辨率可以是对象设置的72像素密度(Pixels Per Inch,ppi),即每英寸图像所拥有的像素的数量为72。
其中,传感器模块是一种用于捕捉外部环境信号从而生成数字信号的设备模块,传感器模块可以由多种传感器,以及控制这些传感器的传感处理器构成。其中,传感器可以包括光学传感器、重力传感器、声音传感器等多种类型。
在一些实施例中,传感器模块还可以包括深度传感器,该深度传感器是用于感应环境中某物与该深度传感器之间距离(即深度)的传感器。
在一些实施例中,第一预设参数是指高数值的分辨率,第一预设参数的彩色图像是指高分辨率的彩色图像,该高数值具体的数值范围可以由技术人员设定,也可以由对象设定,等等。
此外,在一些实施例中,第一预设参数还可以指高数值的图像尺寸,第一预设参数的彩色图像是指大尺寸的彩色图像,该大尺寸具体的尺寸范围可以由技术人员设定,也可以由对象设定,等等。
例如,在一些实施例中,第一预设参数可以包括第一预设分辨率,第一采集指令可以包括扫码指令,步骤101可以是采用颜色传感器采集第一预设分辨率的彩色图像,颜色传感器为传感器模块中感应颜色的传感器,传感器模块中还可以包括传感处理器。
此时,在一些实施例中,步骤102可以包括如下步骤:
(1)当采集指令为扫码指令时,采用传感处理器对第一预设分辨率的彩色图像进行图像压缩处理,得到压缩后的第一预设分辨率的彩色图像;
(2)对压缩后的第一预设分辨率的彩色图像进行第一类图像处理。
对应地,第一类图像处理可以指图像扫码处理,比如,二维码图像扫码处理,等等。
在一些实施例中,彩色图像可以包括条形码图像,步骤“(2)对压缩后的第一预设分辨率的彩色图像进行第一类图像处理”可以包括如下步骤:
对压缩后的第一预设分辨率的条形码图像进行解码处理,得到解码结果;
根据解码结果确定第一类图像处理的处理结果。
其中,第一类图像处理的具体图像处理内容,可以由技术人员预先设置,也可以由对象设置,等等。
比如,第一类图像处理可以指图像降噪、图像识别、图像白平衡、图像分割、图像特征提取、图像锐化,等等。
在一些实施例中,为了在完成第一类图像处理后,立即进行第二类图像处理,故在完成步骤102之后,还可以包括如下步骤:
当接收到切换指令时,再次执行彩色图像采集操作,得到第一预设参数的更新彩色图像,以及,再次执行深度图像采集操作,得到第二预设参数的更新深度图像;
对第一预设参数的更新彩色图像进行参数调整处理,得到第二预设参数的更新彩色图像;
基于第二预设参数的更新深度图像和第二预设参数的更新彩色图像进行第二类图像处理。
其中,类似地,第二预设参数可以是一种预设的图像采集参数,该图像采集参数可以是图像的分辨率参数、尺寸参数、色深度参数、位深度参数,等等;该第一预设参数的具体数值可以由采集指令的操作码来决定,也可以从本地内存中读取,还可以由对象设置,等等。
需要注意的是,第二预设参数可以与第一预设参数相同,也可以不同。
其中,类似地,第二类图像处理的具体图像处理内容,可以由技术人员预先设置,也可以由对象设置,等等。
需要注意的是,第二类图像处理可以与第一类图像处理相同,也可以不同。
其中,“再次执行深度图像采集操作,得到第二预设参数的更新深度图像,对第一预设参数的更新彩色图像进行参数调整处理,得到第二预设参数的更新彩色图像,基于第二预设参数的更新深度图像和第二预设参数的更新彩色图像进行第二类图像处理”的步骤可以参考步骤103,在此不做赘述。
上述步骤通过对第一预设参数的更新彩色图像进行参数调整处理来得到第二预设参数的更新彩色图像,可以在完成第一类图像处理后,无需对传感器模块进行参数配置、重启、调整等操作就可以立刻继续进行第二类图像处理,减少了目前传感器模块因采集第二预设参数的更新彩色图像时参数配置、重启、调整等出现的卡顿、黑屏情况,提高了图像处理效率,从而提高对象体验。
103、当采集指令为第二采集指令时,执行深度图像采集操作,得到第二预设参数的深度图像。
类似地,第二采集指令包含了采集第二预设参数的深度图像,并对其进行第二类图像处理命令的指令,该具体的第二预设参数、第二类图像处理的指令内容可以由技术人员预先设置,也可以由对象设置,等等。
类似地,在一些实施例中,第二预设参数可以是第二预设分辨率;在一些实施例中,第二采集指令可以是低清晰度深度照相指令,该低清晰度深度照相指令是一种指示摄像头采集低清晰度的场景深度图像的指令。
比如,低清晰度深度照相指令可以指示深度摄像头采集540*400分辨率的深度图像。
在一些实施例中,第二采集指令可以是完整人脸识别指令,该完整人脸识别指令是一种指示摄像头采集人脸照片并识别人脸身份的指令。
比如,完整人脸识别指令可以指示深度摄像头采集540*400分辨率的人脸深度图像、指示彩色摄像头采集1920*1080分辨率的人脸彩色图像、并将1920*1080分辨率的人脸彩色图像下采样至540*400分辨率,最终根据540*400分辨率的人脸深度图像以及540*400分辨率的人脸彩色图像进行身份识别的指令。
在一些实施例中,第二采集指令可以是局部的人脸识别指令,该人脸识别指令是一种指示摄像头采集低清晰度的人脸深度照片的指令。
比如,在一些实施例中,第一预设参数可以包括第一预设分辨率,第二预设参数可以包括第二预设分辨率,第二采集指令可以包括人脸识别指令,步骤103可以包括如下步骤:
当采集指令为人脸识别指令时,采用深度传感器采集第二预设分辨率的深度图像。
其中,深度传感器为传感器模块中感应深度的传感器。
其中,深度图像(Depth Image)也被称为距离影像(Range Image),是指将从深度传感器到场景中各点的距离(深度)作为像素值的图像,该深度图像可以直接反映景物可见表面的几何形状。
在人脸识别领域,结合人脸的深度照片后,根据人脸彩色照片进行人脸身份识别可以大大提高识别准确度。
104、对第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像。
其中,在一些实施例中,由于步骤105在进行第二类图像处理时,需要采用相同参数的彩色图像和深度图像,故在步骤104中,可以对彩色图像和深度图像的参数进行配平,以提高第二类图像处理的效果。
在一些实施例中,当第一预设参数大于或高于第二预设参数时,可以对第一预设参数的彩色图像进行参数调整处理,将彩色图像的参数与深度图像的参数配平,从而得到第二预设参数的彩色图像,以便步骤105采用相同参数的彩色图像和深度图像进行第二类图像处理。
在一些实施例中,当第二预设参数大于或高于第一预设参数时,可以对第二预设参数的深度图像进行参数调整处理,将深度图像的参数与彩色图像的参数配平,从而得到第一预设参数的深度图像,以便步骤105采用相同参数的彩色图像和深度图像进行第二类图像处理。
针对第一预设参数大于或高于第二预设参数时需要将彩色图像与深度图像的参数配平的情况,在一些实施例中,第一预设参数可以包括第一预设分辨率,第二预设参数可以包括第二预设分辨率,第二采集指令可以包括人脸识别指令,步骤103可以是当采集指令为人脸识别指令时,采用深度传感器采集第二预设分辨率的深度图像。
其中,深度传感器为传感器模块中感应深度的传感器。
例如,当第一预设参数是1000*1000的分辨率,第二预设参数是500*500的分辨率,对步骤101获得的1000*1000的分辨率的彩色图像进行参数调整处理,可以得到500*500的分辨率的彩色图像,从而在步骤105根据该500*500的分辨率的彩色图像,以及在步骤103获得的500*500的分辨率的深度图像,进行第二类图像处理。
在一些实施例中,为了提高参数调整的速度、降低终端的计算量,从而进一步提高图像处理的效率,步骤104可以采用传感处理器对第一预设分辨率的彩色图像进行参数调整处理,得到第二预设分辨率的彩色图像。
比如,在一些实施例中,步骤“采用传感处理器对第一预设分辨率的彩色图像进行参数调整处理,得到第二预设分辨率的彩色图像”可以包括如下步骤:
(1)确定传感处理器的分辨率映射关系;
(2)采用传感处理器根据分辨率映射关系对第一预设分辨率的彩色图像进行分辨率下采样处理,得到第二预设分辨率的彩色图像。
其中,分辨率映射关系是指第一预设分辨率与第二预设分辨率在宽、高数值上的映射关系。
例如,分辨率映射关系(1000->500,800->400)是指,对于水平宽度来说,将1000分辨率的水平宽度映射为500,对于垂直高度来说,将800分辨率的垂直高度映射为400。
其中,在一些实施例中,可以预先测得分辨率映射关系,比如,传感器模块中可以包括速度传感器、颜色传感器,步骤“确定传感处理器的分辨率映射关系”可以包括如下步骤:
A.采用颜色传感器采集第一预设分辨率的测试图像;
B.采用颜色传感器采集第二预设分辨率的测试图像;
C.在第二预设分辨率的测试图像中确定目标起点像素和目标终点像素;
D.确定目标起点像素和目标终点像素在第一预设分辨率的测试图像中的位置;
E.基于目标起点像素和目标终点像素在第一预设分辨率的测试图像中的位置确定传感处理器的分辨率映射关系。
比如,参考图1c和图1d,图1c和图1d均是采用颜色传感器在相同参考面和拍摄位置上采集的彩色图像,其中,图1d的彩色图像是A*B分辨率的测试图像,图1c的彩色图像是C*D分辨率的测试图像。
其中,A*B分辨率是第一预设分辨率,C*D分辨率是第二预设分辨率。
将图1d中左上角第一个像素确定为目标起点像素,将图1d中右下角第一个像素确定为目标终点像素,其中,目标起点像素在图1c中的位置为(x1,y1),目标终点像素在图1c中的位置为(x2,y2),根据(x1,y1)和(x2,y2)可计算得出该传感器模块中传感处理器的分辨率映射关系。
在一些实施例中,第二预设分辨率可以包括第二预设水平分辨率和第二预设垂直分辨率,位置可以包括水平位置和垂直位置,分辨率映射关系可以包括水平缩放比例和垂直缩放比例,步骤“E.基于目标起点像素和目标终点像素在第一预设分辨率的测试图像中的位置确定传感处理器的分辨率映射关系”可以包括如下步骤:
e1.根据目标起点像素在第一预设分辨率的测试图像中的水平位置,以及目标终点像素在第一预设分辨率的测试图像中的水平位置,计算水平分辨率差值;
e2.根据水平分辨率差值和第二预设水平分辨率计算传感处理器的水平缩放比例;
e3.根据目标起点像素在第一预设分辨率的测试图像中的垂直位置,以及目标终点像素在第一预设分辨率的测试图像中的垂直位置,计算垂直分辨率差值;
e4.根据垂直分辨率差值和第二预设垂直分辨率计算传感处理器的垂直缩放比例。
例如,对于图1c和图1d,目标起点像素在图1c中的位置为(x1,y1),目标终点像素在图1c中的位置为(x2,y2),根据目标终点像素在第一预设分辨率的测试图像中的水平位置x1,以及目标终点像素在第一预设分辨率的测试图像中的水平位置x2,可以计算水平分辨率差值X=(x2-x1)。
根据水平分辨率差值和第二预设水平分辨率C计算传感处理器的水平缩放比例为X/C。
类似地,根据目标终点像素在第一预设分辨率的测试图像中的垂直位置y1,以及目标终点像素在第一预设分辨率的测试图像中的垂直位置y2,可以计算水垂直辨率差值Y=(y2-y1)。
根据垂直分辨率差值和第二预设垂直分辨率D计算传感处理器的水平缩放比例为Y/D。
105、基于第二预设参数的深度图像和第二预设参数的彩色图像进行第二类图像处理。
在一些实施例中,为了提高处理速度、降低计算量,可以仅根据第二预设参数的深度图像进行第二类图像处理。
在一些实施例中,为了提高处理速度、降低计算量,可以仅根据第二预设参数的彩色图像进行第二类图像处理。
在一些实施例中,为了提高处理效果,可以根据相同参数的深度图像和彩色图像进行第二类图像处理。
比如,在一些实施例中,深度图像可以包括人脸深度图像,彩色图像可以包括人脸彩色图像,为了提高人脸识别的准确度,步骤105可以包括如下步骤:
基于第二预设参数的人脸深度图像和第二预设参数的人脸彩色图像进行特征提取,得到面部特征;
在预设特征库中确定面部特征对应的身份信息;
根据身份信息确定第二类图像处理的处理结果。
比如,在预设特征库中可以确定对象的身份信息,当该对象的身份信息符合预设的支付标准时,可以确定第二类图像处理的处理结果为“通过”,从而开始进行电子支付。
在一些实施例中,为了提高图像处理效率,在步骤105之后,还可以包括如下步骤:
当接收到切换指令时,再次执行彩色图像采集操作,得到第一预设参数的更新彩色图像;
基于第一预设参数的更新彩色图像进行第一类图像处理。
相比于通过重置传感器模块来切换传感器的参数,从而使得传感器按照第一预设参数来拍摄彩色图像,本实施例不需要切换传感器的参数,故无需在重置传感器模块消耗时间,提高了图像处理效率。
本发明实施例提供的图像处理方案可以应用在各种身份识别场景中,比如,网上支付、终端解锁等场景。
由上可知,本发明实施例可以在接收到采集指令时,执行彩色图像采集操作,得到第一预设参数的彩色图像;当采集指令为第一采集指令时,基于第一预设参数的彩色图像进行第一类图像处理;当采集指令为第二采集指令时,执行深度图像采集操作,得到第二预设参数的深度图像;对第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像;基于第二预设参数的深度图像和第二预设参数的彩色图像进行第二类图像处理。
由此,本方案可以通过调整彩色图像的参数,使得彩色图像和深度图像的参数相同,从而执行第二类图像处理,本方案无需根据深度图像的参数来采集彩色图像,故无需切换传感器模块的采集参数,减少了图像采集的耗时,从而提升了图像处理的效率。
根据上述实施例所描述的方法,以下将作进一步详细说明。
人工智能(Artificial Intelligence,AI)是一种利用数字计算机来模拟人类感知环境、获取知识并使用知识的技术,该技术可以使机器具有类似于人类的感知、推理与决策的功能。人工智能技术主要包括计算机视觉技术、语音处理技术、自然语言处理技术以及机器学习、深度学习等几大方向。
其中,计算机视觉(ComputerVision,CV)是利用计算机代替人眼对目标图像进行识别、测量等操作并进一步进行处理的技术。计算机视觉技术通常包括图像处理、图像识别、图像语义理解、图像检索、虚拟现实、增强现实、同步定位与地图构建等技术,比如,人脸识别(Face Recognition)等图像识别技术。
条码(Bar Code)是将形状大小不等的多个黑色几何形状和空白几何形状,按照一定的编码规则排列,用以表达一组信息的图形标识符。条码可以包括一维码(1-Dimensional Bar Code)、二维码(2-Dimensional Bar Code),等等;比如,二维码可以包括QR码(Quick Response Code,QR Code)、PDF417码、Code One码,等等。
本实施例提供了一种基于人脸识别和二维码识别进行电子支付的图像处理方法,对本发明实施例的方法进行详细说明。
如图2所示,一种图像处理方法具体流程如下:
201、确定传感器模块的分辨率映射关系,传感器模块包括深度传感器、颜色传感器和传感处理器。
在一些实施例中,传感器模块的分辨率映射关系可以是传感器模块内部由传感器生产厂家设置的基本硬件参数。
例如,在一些实施例中,传感器模块的分辨率映射关系可以是在该传感器模块的生产后,由生产厂家测试该传感器模块的硬件参数,从而确定其分辨率映射关系,并将该分辨率映射关系保存在传感器模块的内存中,等等。
在一些实施例中,传感器模块的分辨率映射关系可以具有多种,当采集图像时,传感器模块的分辨率映射关系可以根据外部环境的不同进行切换,等等。
在一些实施例中,传感器模块的分辨率映射关系可以由人工测试传感器模块的硬件参数测得,其步骤如下:
采用颜色传感器采集第一预设分辨率的测试图像;
采用颜色传感器采集第二预设分辨率的测试图像;
在第二预设分辨率的测试图像中确定目标起点像素和目标终点像素;
确定目标起点像素和目标终点像素在第一预设分辨率的测试图像中的位置;
基于目标起点像素和目标终点像素在第一预设分辨率的测试图像中的位置确定传感处理器的分辨率映射关系。
例如,首先采用颜色传感器采集如1c所示的第一预设分辨率的测试图像,然后,在保持颜色传感器的采集对象、采集位置等不变的情况下,修改颜色传感器的分辨率采集参数,使得颜色传感器采集如图1d所示的第二预设分辨率的测试图像。
在如图1d所示的第二预设分辨率的测试图像中确定目标起点像素和目标终点像素,并确定目标起点像素和目标终点像素在第一预设分辨率的测试图像中的位置;最后,基于目标起点像素和目标终点像素在第一预设分辨率的测试图像中的位置确定传感处理器的分辨率映射关系。
例如,第一预设分辨率的测试图像的分辨率为A*B,第二预设分辨率的测试图像的分辨率为C*D,目标起点像素a在第一预设分辨率的测试图像中的位置为(xa,ya),目标终点像素b在第一预设分辨率的测试图像中的位置为(xb,yb),则分辨率映射关系的计算公式如下:
α=(xa-xb)/C
β=(ya-yb)/D
其中,分辨率映射关系包括水平缩放比例α和垂直缩放比例β。
当需要采用该分辨率映射关系对某图像进行分辨率上采样或下采样时,可以根据该水平缩放比例α和垂直缩放比例β进行最近邻插值,双线性插值,均值插值,中值插值等方法。
例如,对于某一分辨率为M*N的图像进行下采样时,可以根据水平缩放比例α和垂直缩放比例β对其该图像进行间隔取样,最后得到一个分辨率为αM*βN的图像。
202、当接收到扫码指令时,采用颜色传感器采集A*B分辨率的彩色图像。
在一些实施例中,对象可以通过智能手机对商家的二维码进行扫码支付,并在支付时采用人脸识别进行支付验证,故对象可以首先向智能手机下达扫码指令,使得智能手机扫描商家的二维码,对象再向智能手机下达人脸识别指令,使得智能手机采集对象的脸部数据。
比如,在一些实施例中,当智能手机接收到对象的扫码指令时,智能手机可以发送指令来控制传感处理器,使得传感处理器修改颜色传感器的状态参数,从而采用颜色传感器采集A*B分辨率的彩色图像。
在一些实施例中,对象可以通过刷脸支付设备进行线下购物。
比如,对象可以将待购买商品上的商品条形码面对刷脸支付设备的摄像头,以便刷脸支付设备通过摄像头拍摄条形码图片,该刷脸支付设备可以识别商品条形码,从而确认该待购买商品的编号、价格、折扣等信息,当完成扫码进行支付结账后,刷脸支付设备可以拍摄对象的面部图像从而进行人脸支付。
203、基于A*B分辨率的彩色图像进行图像扫码识别处理。
在一些实施例中,传感器处理器可以将采用颜色传感器采集A*B分辨率的彩色图像进行优化处理后传输给主控端(比如,智能手机的处理器),主控端可以扫描A*B分辨率的彩色图像,对其中的二维码进行解码处理,从而确定该二维码所搭载的信息。
在一些实施例中,通过扫码识别处理的结果,可以进行结账处理,比如,扫描商品的商品二维码可以确定商品的价格,从而汇总并显示商品的价格。
204、当接收到人脸识别指令时,采用颜色传感器采集A*B分辨率的彩色图像,以及采用深度传感器采集C*D分辨率的深度图像。
在一些实施例中,在完成图像扫码识别处理后,对象可以向智能手机下达人脸识别指令,此时,主控端可以向传感器处理器下达命令,使得传感器处理器控制颜色传感器采集A*B分辨率的彩色图像,以及控制深度传感器采集C*D分辨率的深度图像。
需要注意的是,由于在步骤202和步骤204中采用颜色传感器采集的彩色图像的分辨率均为A*B,故步骤202中传感处理器和颜色传感器的状态参数无需修改,因此,步骤204采用颜色传感器采集A*B分辨率的彩色图像时,主控端无需重新配置传感处理器和颜色传感器,故节省了二维码扫码后进行人脸识别所消耗的采集时间,在二维码扫码后进行人脸识别不会出现卡顿、黑屏的情况,提高了对象体验,同时增加了图像处理的效率。
205、采用传感处理器根据分辨率映射关系将A*B分辨率的彩色图像下采样得到C*D分辨率的彩色图像。
在一些实施例中,彩色传感器采集的彩色图像分辨率A*B大于深度传感器采集的彩色图像分辨率C*D,故可以在传感处理器中对分辨率A*B的彩色图像进行下采样,就可以使得彩色图像的分辨率于深度图像相同。
在一些实施例中,彩色传感器采集的彩色图像分辨率A*B大于深度传感器采集的彩色图像分辨率C*D,故可以在传感处理器中对分辨率C*D的深度图像进行上采样,就可以使得彩色图像的分辨率于深度图像相同。
在一些实施例中,彩色传感器采集的彩色图像分辨率A*B小于深度传感器采集的彩色图像分辨率C*D,故可以在传感处理器中对分辨率C*D的彩色图像进行下采样,就可以使得彩色图像的分辨率于深度图像相同。
在一些实施例中,彩色传感器采集的彩色图像分辨率A*B小于深度传感器采集的彩色图像分辨率C*D,故可以在传感处理器中对分辨率A*B的彩色图像进行上采样,就可以使得彩色图像的分辨率于深度图像相同。
206、基于C*D分辨率的彩色图像和C*D分辨率的深度图像进行人脸识别处理。
最后,基于相同分辨率的彩色图像和分辨率的深度图像,可以进行人脸识别。
在一些实施例中,人脸识别完成后,可以根据扫码识别的结果进行支付结账。
具体步骤可以参考步骤105,在此不做赘述。
由于目前的摄像头中搭载的深度传感器和颜色传感器的硬件参数不同,故其采集的图像的分辨率也不相同,而目前的扫码技术对二维码图像的清晰度有较高的要求,人脸识别技术对人脸彩色图像和人脸深度图像的要求却并不严格,故目前在扫码后进行人脸识别时,往往是在扫码后切换至人脸识别时,初始化并重新设置颜色传感器的采集参数,从而保证颜色传感器所采集的彩色人脸图像的分辨率于深度人脸图像一致,以满足彩色图和深度图对齐的算法要求。
故目前从扫码功能切换至人脸识别功能时,会出现较长的切换耗时,此时终端会出现卡顿、黑屏的情况,降低了对象体验,以及,图像处理的效率低下。
由上可知,本发明实施例可以确定传感处理器的分辨率映射关系;当接收到扫码指令时,采用颜色传感器采集A*B分辨率的彩色图像,并基于A*B分辨率的彩色图像进行图像扫码识别处理;当接收到人脸识别指令时,采用颜色传感器采集A*B分辨率的彩色图像,以及采用深度传感器采集C*D分辨率的深度图像,并采用传感处理器根据分辨率映射关系将A*B分辨率的彩色图像下采样得到C*D分辨率的彩色图像,然后根据C*D分辨率的彩色图像和C*D分辨率的深度图像进行人脸识别处理。
由此,相比于现有技术,本发明实施例无需修改摄像头中颜色传感器的采集参数,直接按照扫码过程中颜色传感器的采集参数采集同样分辨率的彩色图像,在摄像头内部的传感处理器中对该彩色图像的分辨率调整,以满足彩色图和深度图对齐的算法要求,从而实现扫码和人脸识别过程中图像采集的无缝切换,提高了对象体验,降低了图像采集所需的时间。故本发明实施例可以提升图像处理的效率。
为了更好地实施以上方法,本发明实施例还提供一种图像处理装置,该图像处理装置具体可以集成在电子设备中,该电子设备可以为终端,比如,智能手机、检测设备、刷脸支付设备、自助收银机、收银支付设备、平板电脑、智能蓝牙设备、笔记本电脑、个人电脑等设备。
比如,在本实施例中,将以图像处理装置具体集成在智能手机为例,对本发明实施例的方法进行详细说明。
例如,如图3所示,该图像处理装置可以包括采集彩色单元301、第一处理单元302、采集深度单元303、参数调整单元304以及第二处理单元305,如下:
(一)采集彩色单元301:
采集彩色单元301可以用于在接收到采集指令时,执行彩色图像采集操作,得到第一预设参数的彩色图像。
在一些实施例中,第一预设参数可以包括第一预设分辨率,第一采集指令可以包括扫码指令,采集彩色单元301可以包括采集彩色子单元,其中,采集彩色子单元可以用于采用颜色传感器采集第一预设分辨率的彩色图像,颜色传感器为传感器模块中感应颜色的传感器,传感器模块中还可以包括传感处理器。
(二)第一处理单元302:
第一处理单元302可以用于当采集指令为第一采集指令时,基于第一预设参数的彩色图像进行第一类图像处理。
在一些实施例中,第一预设参数可以包括第一预设分辨率,第一采集指令可以包括扫码指令,采集彩色单元301可以包括采集彩色子单元,其中,采集彩色子单元可以用于采用颜色传感器采集第一预设分辨率的彩色图像,颜色传感器为传感器模块中感应颜色的传感器,传感器模块中还可以包括传感处理器,此时,在一些实施例中,第一处理单元302可以包括压缩子单元和第一处理子单元,如下:
(1)压缩子单元:
压缩子单元可以用于当采集指令为扫码指令时,采用传感处理器对第一预设分辨率的彩色图像进行图像压缩处理,得到压缩后的第一预设分辨率的彩色图像。
(2)第一处理子单元:
第一处理子单元可以用于对压缩后的第一预设分辨率的彩色图像进行第一类图像处理。
在一些实施例中,彩色图像可以包括条形码图像,第一处理子单元可以用于:
对压缩后的第一预设分辨率的条形码图像进行解码处理,得到解码结果;
根据解码结果确定第一类图像处理的处理结果。
在一些实施例中,第一处理单元302,还可以用于:
当接收到切换指令时,再次执行彩色图像采集操作,得到第一预设参数的更新彩色图像,以及,再次执行深度图像采集操作,得到第二预设参数的更新深度图像;
对第一预设参数的更新彩色图像进行参数调整处理,得到第二预设参数的更新彩色图像;
基于第二预设参数的更新深度图像和第二预设参数的更新彩色图像进行第二类图像处理。
(三)采集深度单元303:
采集深度单元303可以用于当采集指令为第二采集指令时,执行深度图像采集操作,得到第二预设参数的深度图像。
在一些实施例中,第一预设参数可以包括第一预设分辨率,第二预设参数可以包括第二预设分辨率,第二采集指令可以包括人脸识别指令,采集深度单元303可以包括采集深度子单元,其中,采集深度子单元可以用于当采集指令为人脸识别指令时,采用深度传感器采集第二预设分辨率的深度图像,深度传感器为传感器模块中感应深度的传感器,传感器模块中还可以包括传感处理器。
在一些实施例中,传感器模块中还可以包括颜色传感器,映射子模块可以用于:
采用颜色传感器采集第一预设分辨率的测试图像;
采用颜色传感器采集第二预设分辨率的测试图像;
在第二预设分辨率的测试图像中确定目标起点像素和目标终点像素;
确定目标起点像素和目标终点像素在第一预设分辨率的测试图像中的位置;
基于目标起点像素和目标终点像素在第一预设分辨率的测试图像中的位置确定传感处理器的分辨率映射关系。
在一些实施例中,第二预设分辨率可以包括第二预设水平分辨率和第二预设垂直分辨率,位置可以包括水平位置和垂直位置,分辨率映射关系可以包括水平缩放比例和垂直缩放比例,映射子模块在可以用于步骤“基于目标起点像素和目标终点像素在第一预设分辨率的测试图像中的位置确定传感处理器的分辨率映射关系”时,可以用于:
根据目标起点像素在第一预设分辨率的测试图像中的水平位置,以及目标终点像素在第一预设分辨率的测试图像中的水平位置,计算水平分辨率差值;
根据水平分辨率差值和第二预设水平分辨率计算传感处理器的水平缩放比例;
根据目标起点像素在第一预设分辨率的测试图像中的垂直位置,以及目标终点像素在第一预设分辨率的测试图像中的垂直位置,计算垂直分辨率差值;
根据垂直分辨率差值和第二预设垂直分辨率计算传感处理器的垂直缩放比例。
(四)参数调整单元304:
参数调整单元304可以用于对第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像。
在一些实施例中,第一预设参数可以包括第一预设分辨率,第二预设参数可以包括第二预设分辨率,第二采集指令可以包括人脸识别指令,采集深度单元303可以包括采集深度子单元,其中,采集深度子单元可以用于当采集指令为人脸识别指令时,采用深度传感器采集第二预设分辨率的深度图像,深度传感器为传感器模块中感应深度的传感器,传感器模块中还可以包括传感处理器,此时,在一些实施例中,参数调整单元304可以包括分辨率调整子单元,其中:
分辨率调整子单元可以用于采用传感处理器对第一预设分辨率的彩色图像进行参数调整处理,得到第二预设分辨率的彩色图像。
在一些实施例中,分辨率调整子单元,可以包括映射子模块和下采样子模块,如下:
(1)映射子模块:
映射子模块可以用于确定传感处理器的分辨率映射关系。
(2)下采样子模块:
下采样子模块可以用于采用传感处理器根据分辨率映射关系对第一预设分辨率的彩色图像进行分辨率下采样处理,得到第二预设分辨率的彩色图像。
(五)第二处理单元305:
第二处理单元305可以用于基于第二预设参数的深度图像和第二预设参数的彩色图像进行第二类图像处理。
在一些实施例中,深度图像可以包括人脸深度图像,彩色图像可以包括人脸彩色图像,第二处理单元305可以用于:
基于第二预设参数的人脸深度图像和第二预设参数的人脸彩色图像进行特征提取,得到面部特征;
在预设特征库中确定面部特征对应的身份信息;
根据身份信息确定第二类图像处理的处理结果。
在一些实施例中,第二处理单元305还可以用于:
当接收到切换指令时,再次执行彩色图像采集操作,得到第一预设参数的更新彩色图像;
基于第一预设参数的更新彩色图像进行第一类图像处理。
具体实施时,以上各个单元可以作为独立的实体来实现,也可以进行任意组合,作为同一或若干个实体来实现,以上各个单元的具体实施可参见前面的方法实施例,在此不再赘述。
由上可知,本实施例的图像处理装置由采集彩色单元用于在接收到采集指令时,执行彩色图像采集操作,得到第一预设参数的彩色图像;由第一处理单元用于当采集指令为第一采集指令时,基于第一预设参数的彩色图像进行第一类图像处理;由采集深度单元用于当采集指令为第二采集指令时,执行深度图像采集操作,得到第二预设参数的深度图像;由参数调整单元用于对第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像;由第二处理单元用于基于第二预设参数的深度图像和第二预设参数的彩色图像进行第二类图像处理。
由此,本发明实施例可以提升图像处理的效率。
本发明实施例还提供一种摄像头,该摄像头可以包括颜色传感器、深度传感器、红外传感器等多种光学传感器,以及用于控制这些传感器的传感处理器,等等。
其中,颜色传感器可以用于执行彩色图像采集操作,得到第一预设参数的彩色图像;
其中,深度传感器可以用于执行深度图像采集操作,得到第二预设参数的深度图像;
其中,传感处理器可以用于加载并执行指令,以对第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像。
在一些实施例中,参考图4a,摄像头由镜头(Lens)、光学传感器(OpticalSensor)、传感处理器组成,其中,传感处理器可以是一种数字信号处理(Digital SignalProcess,DSP)芯片,比如,图像信号处理器(Image Signal Processing,ISP),等等。
其中,镜头是将拍摄景物在传感器上成像的器件,镜头可以由几片透镜组成,该透镜可以是塑胶透镜,也可以是玻璃透镜,等等。
其中,数字信号处理芯片可以通过一系列复杂的数学算法运算,对数字图像信号进行优化处理。需要注意的是,在一些实施例中,数字信号处理芯片除了可以集成在摄像头中,也可以不集成在摄像头中,比如,在一些实施例中,摄像头中只包括多种光学传感器,而数字信号处理芯片集成在终端的处理器中;比如,在另一些实施例中,摄像头中只包括多种光学传感器,而数字信号处理芯片独立于摄像头以及终端处理器存在。
参考图4a,拍摄景物的光信号过镜头投射到传感器的感光区域后,传感器可以通过光电转换将光信号转换为电信号的光学图像,该电信号的光学图像可以经模数转换变为数字信号的光学图像并由ISP加工处理后,通过I/O接口被传输到终端的处理器中进行进一步的处理,最终在终端的屏幕上进行显示,或保存到终端的本地内存中。
其中,终端可以通过ISP来对镜头、传感器等进行相应的配置,来调整镜头的光圈、焦距等参数,以及调节曝光、分辨率、白平衡等图像参数的功能,从而。
需要注意的是,每次通过ISP来对镜头、传感器等进行相应的配置时,终端需要对ISP和传感器进行一次重新配置,比如,当需要切换摄像头的分辨率参数从而采集不同分辨率的图像时,需要中断上一次数据传输,重新进行初始化和赋值来修改摄像头的分辨率参数,再进行此次的图像采集。
在一些实施例中,该传感处理器中可以包括其内置的存储器,以及中央处理器(CPU,Central Processing Unit)。
其中,该传感处理器的CPU中可包括一个或多个处理核心。
其中,该传感处理器的存储器可用于存储软件程序以及模块,该传感处理器的CPU通过运行存储在该传感处理器的存储器的软件程序以及模块,从而执行各种功能应用以及数据处理。
在一些实施例中,摄像头中传感处理器的CPU可以按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行文件加载到该传感处理器的存储器中,并由该传感处理器的存储器来运行存储在该传感处理器的存储器中的应用程序,从而控制深度传感器和颜色传感器实现各种功能,如下:
控制颜色传感器执行彩色图像采集操作,得到第一预设参数的彩色图像;
控制深度传感器执行深度图像采集操作,得到第二预设参数的深度图像;
对第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像。
比如,参考图4b,摄像头可以包括颜色传感器、深度传感器和传感处理器,该深度传感器可以是一种红外传感器,该传感处理器由内置的CPU和ISP构成,该摄像头可以作为下位机(Slave Computer)通过I/O接口接收上位机(Master Computer)下达的指令,从而采集不同图像参数的图像,并将这些图像发送给上位机。
比如,参考图4c,摄像头可以包括颜色传感器、深度传感器和传感处理器,其中,该传感处理器由ISP,以及外置的CPU构成,该ISP通过I/O接口接收上位机下达的指令,来控制外置的传感处理器,从而使得传感处理器控制传感器采集不同图像参数的图像,采集完成后,该ISP将这些图像发送给上位机。
在一些实施例中,上位机可以控制摄像头实现如下功能:
在上位机接收到采集指令时,上位机控制颜色传感器执行彩色图像采集操作,得到第一预设参数的彩色图像;
当采集指令为第一采集指令时,上位机基于第一预设参数的彩色图像进行第一类图像处理;
当采集指令为第二采集指令时,上位机控制深度传感器执行深度图像采集操作,得到第二预设参数的深度图像;
上位机控制传感处理器对第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像;
上位机基于第二预设参数的深度图像和第二预设参数的彩色图像进行第二类图像处理。
本发明实施例还提供一种电子设备,该电子设备可以为终端、服务器等设备。其中,终端可以为手机、检测设备、刷脸支付设备、自助收银机、平板电脑、智能蓝牙设备、笔记本电脑、个人电脑,等等;服务器可以是单一服务器,也可以是由多个服务器组成的服务器集群,等等。
在一些实施例中,该图像处理装置还可以集成在多个电子设备中,比如,图像处理装置可以集成在多个自助收银机中,由多个自助收银机来实现本发明的图像处理方法。
在本实施例中,将以本实施例的电子设备是智能手机为例进行详细描述,比如,如图5所示,其示出了本发明实施例所涉及的智能手机的结构示意图,具体来讲:
该智能手机可以包括一个或者一个以上处理核心的处理器501、一个或一个以上计算机可读存储介质的存储器502、电源503、输入模块504、通信模块505以及摄像头506等部件。
本领域技术人员可以理解,图5中示出的智能手机结构并不构成对智能手机的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
其中,处理器501是该智能手机的控制中心,利用各种接口和线路连接整个智能手机的各个部分,通过运行或执行存储在存储器502内的软件程序和/或模块,以及调用存储在存储器502内的数据,执行智能手机的各种功能和处理数据,从而对智能手机进行整体检测。
在一些实施例中,处理器501可包括一个或多个处理核心;在一些实施例中,处理器501可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、对象界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器501中。
存储器502可用于存储软件程序以及模块,处理器501通过运行存储在存储器502的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器502可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据智能手机的使用所创建的数据等。
此外,存储器502可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
相应地,存储器502还可以包括存储器控制器,以提供处理器501对存储器502的访问。
智能手机还包括给各个部件供电的电源503,在一些实施例中,电源503可以通过电源管理系统与处理器501逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源503还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
该智能手机还可包括输入模块504,该输入模块504可用于接收输入的数字或字符信息,以及产生与对象设置以及功能控制有关的键盘、鼠标、操作杆、手柄、光学或者轨迹球信号输入。
该智能手机还可包括通信模块505,在一些实施例中通信模块505可以包括无线模块,智能手机可以通过该通信模块505的无线模块进行短距离无线传输,从而为对象提供了无线的宽带互联网访问。比如,该通信模块505可以用于帮助对象收发电子邮件、浏览网页和访问流式媒体等。
该智能手机还可包括摄像头506,该摄像头可以包括传感器模块,该传感器模块中可以包括颜色传感器、深度传感器、红外传感器等等光学传感器,以及用于控制处理这些光学传感器的传感处理器。
该摄像头506的结构和功能可以参考图4a、图4b以及图4c,在此不做赘述。
其中,摄像头506可以用于执行彩色图像采集操作,得到第一预设参数的彩色图像,以及执行深度图像采集操作,得到第二预设参数的深度图像。
在一些实施例中,摄像头506还可以对第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像。
尽管未示出,智能手机还可以包括显示单元等,在此不再赘述。
在一些实施例中,智能手机中的处理器501会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器502中,并由处理器501来运行存储在存储器502中的应用程序,从而控制摄像头506实现各种功能,如下:
在接收到采集指令时,控制摄像头506执行彩色图像采集操作,得到第一预设参数的彩色图像;
当采集指令为第一采集指令时,基于第一预设参数的彩色图像进行第一类图像处理;
当采集指令为第二采集指令时,控制摄像头506执行深度图像采集操作,得到第二预设参数的深度图像;
控制摄像头506对第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像;
基于第二预设参数的深度图像和第二预设参数的彩色图像进行第二类图像处理。
其中,在一些实施例中,摄像头506可以包括颜色传感器、深度传感器和传感处理器,智能手机中的处理器501会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器502中,并由处理器501来运行存储在存储器502中的应用程序,从而控制摄像头506的颜色传感器、深度传感器和传感处理器实现各种功能,如下:
在接收到采集指令时,控制颜色传感器执行彩色图像采集操作,得到第一预设参数的彩色图像;
当采集指令为第一采集指令时,基于第一预设参数的彩色图像进行第一类图像处理;
当采集指令为第二采集指令时,控制深度传感器执行深度图像采集操作,得到第二预设参数的深度图像;
控制传感处理器对第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像;
基于第二预设参数的深度图像和第二预设参数的彩色图像进行第二类图像处理。
以上各个操作的具体实施可参见前面的实施例,在此不再赘述。
由上可知,本发明实施例可以提升图像处理的效率。
本领域普通技术人员可以理解,上述实施例的各种方法中的全部或部分步骤可以通过指令来完成,或通过指令控制相关的硬件来完成,该指令可以存储于一计算机可读存储介质中,并由处理器进行加载和执行。
在一些实施例中,本发明实施例提供一种计算机可读存储介质,其中存储有多条指令,该指令能够被处理器进行加载,以执行本发明实施例所提供的任一种图像处理方法中的步骤。例如,该指令可以执行如下步骤:
在接收到采集指令时,执行彩色图像采集操作,得到第一预设参数的彩色图像;
当采集指令为第一采集指令时,基于第一预设参数的彩色图像进行第一类图像处理;
当采集指令为第二采集指令时,执行深度图像采集操作,得到第二预设参数的深度图像;
对第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像;
基于第二预设参数的深度图像和第二预设参数的彩色图像进行第二类图像处理。
其中,该存储介质可以包括:只读存储器(ROM,ReadOnlyMemory)、随机存取记忆体(RAM,RandomAccessMemory)、磁盘或光盘等。
由于该存储介质中所存储的指令,可以执行本发明实施例所提供的任一种图像处理方法中的步骤,因此,可以实现本发明实施例所提供的任一种图像处理方法所能实现的有益效果,详见前面的实施例,在此不再赘述。
以上对本发明实施例所提供的一种图像处理方法、装置、摄像头、终端和计算机可读存储介质进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (14)

1.一种图像处理方法,其特征在于,包括:
在接收到采集指令时,执行彩色图像采集操作,得到第一预设参数的彩色图像,所述第一预设参数包括第一预设分辨率;
当所述采集指令为第一采集指令时,基于所述第一预设参数的彩色图像进行第一类图像处理;
当所述采集指令为第二采集指令时,执行深度图像采集操作,得到第二预设参数的深度图像,包括:当所述采集指令为人脸识别指令时,采用深度传感器采集第二预设分辨率的深度图像,所述深度传感器为传感器模块中感应深度的传感器,所述传感器模块中还包括传感处理器,所述第二预设参数包括第二预设分辨率;
对所述第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像;
基于所述第二预设参数的深度图像和所述第二预设参数的彩色图像进行第二类图像处理,包括:采用所述传感处理器对所述第一预设分辨率的彩色图像进行参数调整处理,得到第二预设分辨率的彩色图像。
2.如权利要求1所述的图像处理方法,其特征在于,所述采用所述传感处理器对所述第一预设分辨率的彩色图像进行参数调整处理,得到第二预设分辨率的彩色图像,包括:
确定所述传感处理器的分辨率映射关系;
采用所述传感处理器根据所述分辨率映射关系对所述第一预设分辨率的彩色图像进行分辨率下采样处理,得到第二预设分辨率的彩色图像。
3.如权利要求2所述的图像处理方法,其特征在于,所述传感器模块中还包括颜色传感器;
所述确定所述传感处理器的分辨率映射关系,包括:
采用所述颜色传感器采集第一预设分辨率的测试图像;
采用所述颜色传感器采集第二预设分辨率的测试图像;
在所述第二预设分辨率的测试图像中确定目标起点像素和目标终点像素;
确定所述目标起点像素和目标终点像素在所述第一预设分辨率的测试图像中的位置;
基于所述目标起点像素和目标终点像素在所述第一预设分辨率的测试图像中的位置确定所述传感处理器的分辨率映射关系。
4.如权利要求3所述的图像处理方法,其特征在于,所述第二预设分辨率包括第二预设水平分辨率和第二预设垂直分辨率,所述位置包括水平位置和垂直位置,所述分辨率映射关系包括水平缩放比例和垂直缩放比例;
所述基于所述目标起点像素和目标终点像素在所述第一预设分辨率的测试图像中的位置确定所述传感处理器的分辨率映射关系,包括:
根据所述目标起点像素在所述第一预设分辨率的测试图像中的水平位置,以及所述目标终点像素在所述第一预设分辨率的测试图像中的水平位置,计算水平分辨率差值;
根据所述水平分辨率差值和所述第二预设水平分辨率计算所述传感处理器的水平缩放比例;
根据所述目标起点像素在所述第一预设分辨率的测试图像中的垂直位置,以及所述目标终点像素在所述第一预设分辨率的测试图像中的垂直位置,计算垂直分辨率差值;
根据所述垂直分辨率差值和所述第二预设垂直分辨率计算所述传感处理器的垂直缩放比例。
5.如权利要求1所述的图像处理方法,其特征在于,所述第一预设参数包括第一预设分辨率,所述第一采集指令包括扫码指令;
所述执行彩色图像采集操作,得到第一预设参数的彩色图像,包括:
采用颜色传感器采集所述第一预设分辨率的彩色图像,所述颜色传感器为传感器模块中感应颜色的传感器,所述传感器模块中还包括传感处理器;
所述当所述采集指令为第一采集指令时,基于所述第一预设参数的彩色图像进行第一类图像处理,包括:
当所述采集指令为扫码指令时,采用所述传感处理器对所述第一预设分辨率的彩色图像进行图像压缩处理,得到压缩后的第一预设分辨率的彩色图像;
对所述压缩后的第一预设分辨率的彩色图像进行第一类图像处理。
6.如权利要求5所述的图像处理方法,其特征在于,所述彩色图像包括条形码图像;
所述对所述压缩后的第一预设分辨率的彩色图像进行第一类图像处理,包括:
对所述压缩后的第一预设分辨率的条形码图像进行解码处理,得到解码结果;
根据所述解码结果确定所述第一类图像处理的处理结果。
7.如权利要求1所述的图像处理方法,其特征在于,所述深度图像包括人脸深度图像,所述彩色图像包括人脸彩色图像,基于所述第二预设参数的深度图像和所述第二预设参数的彩色图像进行第二类图像处理,包括:
基于所述第二预设参数的人脸深度图像和所述第二预设参数的人脸彩色图像进行特征提取,得到面部特征;
在预设特征库中确定所述面部特征对应的身份信息;
根据所述身份信息确定所述第二类图像处理的处理结果。
8.如权利要求1所述的图像处理方法,其特征在于,所述基于所述第二预设参数的深度图像和所述第二预设参数的彩色图像进行第二类图像处理之后,还包括:
当接收到切换指令时,再次执行彩色图像采集操作,得到第一预设参数的更新彩色图像;
基于所述第一预设参数的更新彩色图像进行第一类图像处理。
9.如权利要求1所述的图像处理方法,其特征在于,所述基于所述第一预设参数的彩色图像进行第一类图像处理之后,还包括:
当接收到切换指令时,再次执行彩色图像采集操作,得到第一预设参数的更新彩色图像,以及,再次执行深度图像采集操作,得到第二预设参数的更新深度图像;
对所述第一预设参数的更新彩色图像进行参数调整处理,得到第二预设参数的更新彩色图像;
基于所述第二预设参数的更新深度图像和所述第二预设参数的更新彩色图像进行第二类图像处理。
10.一种图像处理装置,其特征在于,包括:
采集彩色单元,用于在接收到采集指令时,执行彩色图像采集操作,得到第一预设参数的彩色图像,所述第一预设参数包括第一预设分辨率;
第一处理单元,用于当所述采集指令为第一采集指令时,基于所述第一预设参数的彩色图像进行第一类图像处理;
采集深度单元,用于当所述采集指令为第二采集指令时,执行深度图像采集操作,得到第二预设参数的深度图像,包括:当所述采集指令为人脸识别指令时,采用深度传感器采集第二预设分辨率的深度图像,所述深度传感器为传感器模块中感应深度的传感器,所述传感器模块中还包括传感处理器,所述第二预设参数包括第二预设分辨率;
参数调整单元,用于对所述第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像,包括:采用所述传感处理器对所述第一预设分辨率的彩色图像进行参数调整处理,得到第二预设分辨率的彩色图像;
第二处理单元,用于基于所述第二预设参数的深度图像和所述第二预设参数的彩色图像进行第二类图像处理。
11.一种摄像头,其特征在于,包括颜色传感器、深度传感器和传感处理器,其中:
所述颜色传感器用于执行彩色图像采集操作,得到第一预设参数的彩色图像;
所述深度传感器用于执行深度图像采集操作,得到第二预设参数的深度图像;
所述传感处理器中存储有多条指令,所述传感处理器用于加载并执行所述指令,以对所述第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像。
12.一种终端,其特征在于,包括处理器、存储器和摄像头,其中:
所述摄像头用于执行彩色图像采集操作,得到第一预设参数的彩色图像,以及执行深度图像采集操作,得到第二预设参数的深度图像,以及对所述第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像;
所述存储器用于存储图像数据以及多条指令;
所述处理器用于读取所述存储器存储的多条指令,以执行以下步骤:
在接收到采集指令时,控制摄像头执行彩色图像采集操作,得到第一预设参数的彩色图像;
当所述采集指令为第一采集指令时,基于所述第一预设参数的彩色图像进行第一类图像处理;
当所述采集指令为第二采集指令时,控制摄像头执行深度图像采集操作,得到第二预设参数的深度图像;
控制摄像头对所述第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像;
基于所述第二预设参数的深度图像和所述第二预设参数的彩色图像进行第二类图像处理。
13.如权利要求12所述的终端,其特征在于,所述摄像头包括颜色传感器、深度传感器和传感处理器,所述处理器用于读取所述存储器存储的多条指令,以执行以下步骤:
在接收到采集指令时,控制颜色传感器执行彩色图像采集操作,得到第一预设参数的彩色图像,所述第一预设参数包括第一预设分辨率;
当所述采集指令为第一采集指令时,基于所述第一预设参数的彩色图像进行第一类图像处理;
当所述采集指令为第二采集指令时,控制深度传感器执行深度图像采集操作,得到第二预设参数的深度图像,包括:当所述采集指令为人脸识别指令时,采用深度传感器采集第二预设分辨率的深度图像,所述深度传感器为传感器模块中感应深度的传感器,所述传感器模块中还包括传感处理器,所述第二预设参数包括第二预设分辨率;
控制传感处理器对所述第一预设参数的彩色图像进行参数调整处理,得到第二预设参数的彩色图像,包括:采用所述传感处理器对所述第一预设分辨率的彩色图像进行参数调整处理,得到第二预设分辨率的彩色图像;
基于所述第二预设参数的深度图像和所述第二预设参数的彩色图像进行第二类图像处理。
14.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有多条指令,所述指令适于处理器进行加载,以执行权利要求1~9任一项所述的图像处理方法中的步骤。
CN202010343123.0A 2020-04-27 2020-04-27 图像处理方法、装置、摄像头、终端和存储介质 Active CN111526342B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010343123.0A CN111526342B (zh) 2020-04-27 2020-04-27 图像处理方法、装置、摄像头、终端和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010343123.0A CN111526342B (zh) 2020-04-27 2020-04-27 图像处理方法、装置、摄像头、终端和存储介质

Publications (2)

Publication Number Publication Date
CN111526342A CN111526342A (zh) 2020-08-11
CN111526342B true CN111526342B (zh) 2023-09-12

Family

ID=71906136

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010343123.0A Active CN111526342B (zh) 2020-04-27 2020-04-27 图像处理方法、装置、摄像头、终端和存储介质

Country Status (1)

Country Link
CN (1) CN111526342B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111582244B (zh) * 2020-06-08 2024-03-29 腾讯科技(深圳)有限公司 数据转移方法、系统及计算机可读存储介质和终端设备
CN112606402A (zh) * 2020-11-03 2021-04-06 泰州芯源半导体科技有限公司 应用多参数解析的产品制造平台
CN113627923A (zh) * 2021-07-02 2021-11-09 支付宝(杭州)信息技术有限公司 一种线下支付方法、装置及设备
CN114125244A (zh) * 2021-12-03 2022-03-01 上海商米科技集团股份有限公司 一种摄像头模组及实现方法、移动设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7909248B1 (en) * 2007-08-17 2011-03-22 Evolution Robotics Retail, Inc. Self checkout with visual recognition
CN103873834A (zh) * 2012-12-10 2014-06-18 联想(北京)有限公司 图像采集方法及相应图像采集单元
CN108549867A (zh) * 2018-04-12 2018-09-18 Oppo广东移动通信有限公司 图像处理方法、装置、计算机可读存储介质和电子设备
CN110322411A (zh) * 2019-06-27 2019-10-11 Oppo广东移动通信有限公司 深度图像的优化方法、终端及存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7909248B1 (en) * 2007-08-17 2011-03-22 Evolution Robotics Retail, Inc. Self checkout with visual recognition
CN103873834A (zh) * 2012-12-10 2014-06-18 联想(北京)有限公司 图像采集方法及相应图像采集单元
CN108549867A (zh) * 2018-04-12 2018-09-18 Oppo广东移动通信有限公司 图像处理方法、装置、计算机可读存储介质和电子设备
CN110322411A (zh) * 2019-06-27 2019-10-11 Oppo广东移动通信有限公司 深度图像的优化方法、终端及存储介质

Also Published As

Publication number Publication date
CN111526342A (zh) 2020-08-11

Similar Documents

Publication Publication Date Title
CN111526342B (zh) 图像处理方法、装置、摄像头、终端和存储介质
KR102319177B1 (ko) 이미지 내의 객체 자세를 결정하는 방법 및 장치, 장비, 및 저장 매체
US10586100B2 (en) Extracting card data from multiple cards
US9727775B2 (en) Method and system of curved object recognition using image matching for image processing
JP7118244B2 (ja) グラフィックコード認識方法及び装置、並びに、端末及びプログラム
US9367754B2 (en) Payment card OCR with relaxed alignment
US9058655B2 (en) Region of interest based image registration
EP3017399B1 (en) Payment card ocr with relaxed alignment
JP2015185034A (ja) 画像認識装置、画像認識方法およびプログラム
CN111028276A (zh) 图像对齐方法、装置、存储介质及电子设备
CN112013820B (zh) 一种面向无人机机载平台部署的实时目标检测方法及装置
CN111563895A (zh) 一种图片清晰度确定方法、装置、设备及存储介质
CN111080683A (zh) 图像处理方法、装置、存储介质及电子设备
Mathur et al. A real-time super-resolution for surveillance thermal cameras using optimized pipeline on embedded edge device
US10303988B1 (en) Visual search methods and systems
KR102071975B1 (ko) 광학적 문자 인식을 사용하는 카드 결제 장치 및 방법
CN112036342A (zh) 单证抓拍方法、设备及计算机存储介质
CN112351181A (zh) 基于cmos芯片和zynq体系的智能相机
US11636675B2 (en) Electronic device and method for providing multiple services respectively corresponding to multiple external objects included in image
CN118171672A (zh) 条形码识别方法、电子设备、计算机存储介质和程序产品
CN115564778A (zh) 缺陷的检测方法、装置、电子设备及计算机可读存储介质
CN114972303A (zh) 图像获取方法、装置、电子设备及存储介质
CN115705634A (zh) 图像采集方法、装置、电子设备和存储介质
CN116051581A (zh) 一种图像处理方法、装置及存储介质
CN112560869A (zh) 模型获得方法、装置和设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40027456

Country of ref document: HK

SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant