CN110933307A - 一种电子设备及图像处理方法 - Google Patents
一种电子设备及图像处理方法 Download PDFInfo
- Publication number
- CN110933307A CN110933307A CN201911202504.0A CN201911202504A CN110933307A CN 110933307 A CN110933307 A CN 110933307A CN 201911202504 A CN201911202504 A CN 201911202504A CN 110933307 A CN110933307 A CN 110933307A
- Authority
- CN
- China
- Prior art keywords
- image
- electronic device
- module
- signal processing
- storage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 17
- 238000012545 processing Methods 0.000 claims abstract description 120
- 238000000034 method Methods 0.000 claims description 41
- 238000004590 computer program Methods 0.000 claims description 10
- 238000004891 communication Methods 0.000 abstract description 5
- 230000006870 function Effects 0.000 description 16
- 230000005540 biological transmission Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 12
- 238000012937 correction Methods 0.000 description 8
- 238000001514 detection method Methods 0.000 description 6
- 239000000428 dust Substances 0.000 description 5
- 238000001914 filtration Methods 0.000 description 4
- 230000001965 increasing effect Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 238000013461 design Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000005429 filling process Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Studio Devices (AREA)
Abstract
本发明实施例提供一种电子设备及图像处理方法,涉及通信技术领域,能够解决电子设备采用TOF摄像头采集的图像进行身份认证的精确度较低的问题。该电子设备包括:TOF摄像头、与TOF摄像头连接的图像获取模块,以及与图像获取模块连接的图像存储模块。其中,TOF摄像头,用于采集第一图像,并将第一图像传输至图像获取模块;图像获取模块,用于根据第一图像,获取第二图像,并将第二图像传输至所述图像存储模块存储,第二图像为对第一图像处理后的图像,且第二图像的清晰度大于第一图像。该电子设备应用于解锁、支付等身份认证的安全类操作的场景中。
Description
技术领域
本发明实施例涉及通信技术领域,尤其涉及一种电子设备及图像处理方法。
背景技术
随着通信技术的不断发展,电子设备可以支持的功能越来越多。
目前,电子设备可以通过飞行时间(time of flight,TOF)摄像头实现解锁、支付、AR拍照等功能。通常,当电子设备通过TOF摄像头进行解锁、支付等身份认证时,在电子设备通过TOF摄像头采集到图像之后,电子设备可以将该图像发送到电子设备的安全内存,由于安全内存中的数据不允许外部应用程序访问或修改,因此电子设备可以在可信执行环境(trust execution environment,TEE)中,根据安全内存中的该图像进行身份认证。这种情况下,电子设备进行身份认证结果的精确度很大程度上取决于TOF摄像头采集的图像的图像质量。
然而,实际情况下,通过TOF摄像头采集的图像由于受到被测物体和外界环境的影响,可能图像质量较差,因此可能导致电子设备采用TOF摄像头采集的图像进行身份认证的精确度较低。
发明内容
本发明实施例提供一种电子设备及图像处理方法,以解决电子设备采用TOF摄像头采集的图像进行身份认证的精确度较低的问题。
为了解决上述技术问题,本申请是这样实现的:
第一方面,本发明实施例提供了一种电子设备,该电子设备包括:TOF摄像头、与TOF摄像头连接的图像获取模块,以及与图像获取模块连接的图像存储模块。其中,TOF摄像头,用于采集第一图像,并将第一图像传输至图像获取模块;图像获取模块,用于根据第一图像,获取第二图像,并将第二图像传输至图像存储模块存储,第二图像为对第一图像处理后的图像,且第二图像的清晰度大于第一图像。
第二方面,本发明实施例提供了一种图像处理方法,该方法应用于电子设备,该方法包括:通过电子设备中的TOF摄像头采集第一图像;并根据第一图像,获取第二图像;以及存储第二图像。其中,第二图像为对第一图像处理后的图像,且第二图像的清晰度大于第一图像的清晰度。
第三方面,本发明实施例提供一种电子设备,该电子设备包括处理器、存储器及存储在存储器上并可在处理器上运行的计算机程序,该计算机程序被处理器执行时实现如上述第二方面中的图像处理方法的步骤。
第四方面,本发明实施例提供一种计算机可读存储介质,该计算机可读存储介质上存储计算机程序,该计算机程序被处理器执行时实现如上述第二方面中的图像处理方法的步骤。
在本发明实施例中,电子设备可以包括TOF摄像头、与TOF摄像头连接的图像获取模块,以及与图像获取模块连接的图像存储模块。其中,TOF摄像头可以用于采集第一图像,并将第一图像传输至图像获取模块;图像获取模块可以用于根据第一图像,获取第二图像,并将第二图像传输至图像存储模块存储,第二图像为对第一图像处理后的图像,且第二图像的清晰度大于第一图像。通过该方案,由于TOF摄像头在将第一图像传输至图像存储模块之前,可以先将第一图像传输至图像获取模块,由图像获取模块根据第一图像获取到与第一图像对应的,且清晰度大于第一图像的清晰度的第二图像,并将第二图像传输至图像存储模块存储,因此,在电子设备进行解锁、支付等身份认证的场景中,电子设备可以直接采用存储的、清晰度较高的第二图像进行身份认证,从而可以提高电子设备采用TOF摄像头采集的图像进行身份认证的精确度。
附图说明
图1为本发明实施例提供的一种电子设备的结构示意图之一;
图2为本发明实施例提供的一种电子设备的结构示意图之二;
图3为本发明实施例提供的一种图像处理流程示意图;
图4为本发明实施例提供的一种电子设备的结构示意图之三;
图5为本发明实施例提供的一种电子设备的结构示意图之四;
图6为本发明实施例提供的一种电子设备的结构示意图之五;
图7为本发明实施例提供的一种电子设备的结构示意图之六;
图8为本发明实施例提供的一种图像处理方法的示意图;
图9为本发明实施例提供的一种电子设备的硬件示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本文中的术语“和/或”,是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。本文中符号“/”表示关联对象是或者的关系,例如A/B表示A或者B。
本文中的术语“第一”和“第二”等是用于区别不同的对象,而不是用于描述对象的特定顺序。例如,第一图像和第二图像等是用于区别不同的图像,而不是用于描述图像的特定顺序。
在本发明实施例中,“示例性的”或者“例如”等词用于表示作例子、例证或说明。本发明实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
在本发明实施例的描述中,除非另有说明,“多个”的含义是指两个或者两个以上,例如,多个元件是指两个或者两个以上的元件等。
下面首先对本发明实施例中的各个附图标记进行说明。
20:电子设备;201:TOF摄像头;202:图像获取模块;203:图像存储模块;2021:TOF处理模块;2022:网络传输模块;2031:安全内存;2032:普通内存;204:数据分流器件;205:第一图像信号处理模块;206:第二图像信号处理模块。
一般地,针对设置有TOF摄像头的电子设备,该电子设备可以通过TOF摄像头进行解锁、支付等身份认证的安全类操作,也可以进行增强现实(augmented reality,AR)拍照、AR游戏、测距和虚拟购物等普通类操作。
需要说明的是,本发明实施例中,在电子设备进行安全类操作的情况下,电子设备通过TOF摄像头采集的图像不允许外部程序访问或修改,且该图像直接用于解锁、支付等身份认证。在电子设备进行普通类操作的情况下,电子设备通过TOF摄像头采集的图像允许外部程序访问或修改,且通常情况下,电子设备进行AR拍照、AR游戏时采用的图像均为处理(例如美化、马赛克)后的图像。
通常,当电子设备通过TOF摄像头进行解锁、支付等身份认证时,电子设备进行身份认证结果的精确度很大程序上取决于TOF摄像头采集的图像的图像质量。然而,通常情况下,通过TOF摄像头采集的图像由于受到被测物体和外界环境的影响,可能图像质量较差,因此可能导致电子设备采用TOF摄像头采集的图像进行身份认证的精确度较低。
为了解决上述技术问题,本发明实施例提供一种电子设备及图像处理方法。具体的,该电子设备可以包括TOF摄像头、与TOF摄像头连接的图像获取模块,以及与图像获取模块连接的图像存储模块。其中,TOF摄像头可以用于采集第一图像,并将第一图像传输至图像获取模块;图像获取模块可以用于根据第一图像,获取第二图像,并将第二图像传输至图像存储模块存储,第二图像为对第一图像处理后的图像,且第二图像的清晰度大于第一图像。通过该方案,由于TOF摄像头在将第一图像传输至图像存储模块之前,可以先将第一图像传输至图像获取模块,由图像获取模块根据第一图像获取到与第一图像对应、且清晰度大于第一图像的清晰度的第二图像,并将第二图像传输至图像存储模块存储,因此,在电子设备进行解锁、支付等身份认证的场景中,电子设备可以直接采用存储的、清晰度较高的第二图像进行身份认证,从而可以提高电子设备采用TOF摄像头采集的图像进行身份认证的精确度。
下面首先结合各个附图对本发明实施例提供的电子设备进行示例性的说明。
如图1所示,本发明实施例提供一种电子设备20,该电子设备20可以包括TOF摄像头201、与TOF摄像头201连接的图像获取模块202,以及与图像获取模块202连接的图像存储模块203。
本发明实施例中,TOF摄像头201,可以用于采集第一图像,并将第一图像传输至图像获取模块202;图像获取模块202,可以用于根据第一图像,获取第二图像,并将第二图像传输至图像存储模块203存储。其中,第二图像为对第一图像处理后的图像。
可以理解,上述图像存储模块203,可以用于存储第二图像。
可选的,本发明实施例中,上述第二图像的清晰度大于第一图像的清晰度。其中,图像的清晰度越高,电子设备采用该图像进行解锁、支付等身份认证的精确度越高。
可选的,本发明实施例中,上述第一图像可以为人脸图像,也可以为实物图像等任意可能的图像,具体可以根据实际使用需求确定,本发明实施例不作限定。
本发明实施例中,在TOF摄像头采集到第一图像之后,TOF摄像头可以将第一图像传输至图像获取模块。在图像获取模块接收到第一图像之后,图像获取模块可以根据第一图像,获取清晰度大于第一图像的清晰度的第二图像。在图像获取模块获取到第二图像之后,图像获取模块可以将第二图像传输至图像存储模块存储。如此,由于第二图像的清晰度大于第一图像的清晰度,因此当电子设备采用第二图像进行某些操作,例如解锁、支付等身份认证的安全类操作时,可以提高电子设备进行这些操作的精确度。
本发明实施例中,由于TOF摄像头在将第一图像传输至图像存储模块之前,可以先将第一图像传输至图像获取模块,由图像获取模块根据第一图像获取到与第一图像对应、且清晰度大于第一图像的清晰度的第二图像,并将第二图像传输至图像存储模块存储,因此,在电子设备进行解锁、支付等身份认证的场景中,电子设备可以直接采用存储的、清晰度较高的第二图像进行身份认证,从而可以提高电子设备采用TOF摄像头采集的图像进行身份认证的精确度。
可选的,本发明实施例中,一种可能的实现方式中,上述图像获取模块,具体可以用于对第一图像进行处理,得到第二图像。在这种情况下,如图2所示,图像获取模块具体可以通过TOF处理模块2021实现。
本实施例中,在TOF摄像头采集到第一图像之后,TOF摄像头可以将第一图像传输至TOF处理模块。在TOF处理模块接收到第一图像之后,TOF处理模块可以通过对第一图像进行处理得到第二图像。示例性的,TOF处理模块可以按照图3所示的图像处理流程对第一图像进行处理。可以理解,图3所示的图像处理流程可以对应多种图像处理算法,例如,可以对应时域降噪算法、镜头畸变校正算法、平面校正算法、导向滤波算法、飞行像素算法、孔洞检测算法以及孔洞填补算法等。
具体的,如图3所示,在TOF处理模块接收到第一图像之后,TOF处理模块可以对第一图像依次进行如下处理:采用时域降噪算法对第一图像进行时域降噪处理、采用镜头畸变校正算法对第一图像进行镜头畸变校正处理、采用平面校正算法对第一图像进行平面校正处理、采用导向滤波算法对第一图像进行导向滤波处理、采用飞行像素算法对第一图像进行飞行像素处理、采用孔洞检测算法对第一图像进行孔洞检测处理,以及采用孔洞填补算法对第一图像进行孔洞填补处理。其中,时域降噪处理,可以用于消除第一图像中的噪声像素点。镜头畸变校正处理,可以用于消除由于TOF摄像头的镜头精度和工艺导致的第一图像失真的问题。平面校正处理,可以用于消除第一图像在成像过程中产生的畸变问题。导向滤波处理,可以用于提高第一图像的透射率,增强第一图像的显示效果。飞行像素处理,可以用于去除第一图像中由于光线、灰尘等外界因素产生的异常像素点。孔洞检测处理,可以用于检测第一图像中的孔洞,即缺失的像素点。孔洞填补处理,可以用于填补第一图像的孔洞,也即填补缺失的像素点。
需要说明的是,本发明实施例中,TOF处理模块按照图3所示的图像处理流程处理第一图像时,可以不限定该流程中各个处理步骤的执行顺序(即不限定采用各个图像处理算法处理图像的顺序),也就是说,TOF处理模块可以按照与图3所示的流程不同的顺序处理第一图像;并且,也可以不限定该流程中具体执行的处理步骤的数量,即TOF处理模块可以采用图3所示的流程中的部分步骤处理第一图像。
本发明实施例中,由于TOF摄像头采集的图像容易受到光线、灰尘等多种因素的干扰,因此,当电子设备对TOF摄像头采集的图像进行处理时,可以采用多种不同的图像处理算法进行处理,例如,有些图像处理算法可以用于降低或消除光线对图像的干扰,有些图像处理算法可以用于降低或消除灰尘对图像的干扰,从而可以保证电子设备对TOF摄像头采集的图像进行处理后的图像的清晰度大于处理前的图像的清晰度,即经过处理后,可以得到更高清晰度的图像。
可选的,本发明实施例中,另一种可能的实现方式中,上述图像获取模块,具体可以用于向服务器发送第一图像,并接收服务器发送的第二图像。在这种情况下,如图4所示,图像获取模块具体可以通过网络传输模块2022实现。
本发明实施例中,在TOF摄像头采集到第一图像之后,TOF摄像头可以将第一图像传输至网络传输模块。在网络传输模块接收到第一图像之后,网络传输模块可以将第一图像传输至服务器。在服务器接收到第一图像之后,服务器可以对第一图像进行处理,得到第二图像。然后服务器可以再将第二图像传输至网络传输模块。在网络传输模块接收到第二图像之后,网络传输模块可以再将第二图像传输至图像存储模块中存储。
示例性的,本发明实施例中,服务器可以按照上述如图3所示的图像处理流程对第一图像进行处理。
本发明实施例中,由于图像获取模块可以将第一图像传输至服务器进行处理,即服务器可以对第一图像进行处理,得到第二图像,因此既可以保证第二图像的清晰度大于第一图像,又可以提升图像处理的速度,减小电子设备的功耗。
可选的,结合上述图1,如图5所示,本发明实施例提供的图像存储模块203可以包括安全内存2031和普通内存2032。其中,图像获取模块202,具体可以用于将第二图像分别传输至安全内存2031和普通内存2032存储。在这种情况下,如图6所示,上述图像获取模块具体可以通过数据分流器件204实现。
可以理解,在图像获取模块通过数据分流器件实现的情况下,该数据分流器件上可以集成上述TOF处理模块的功能或网络传输模块的功能。具体地,TOF处理模块的功能或网络传输模块的功能可以通过在该数据分流器件上加载固件的方式集成在该数据分流器件上;或者,TOF处理模块的功能或网络传输模块的功能可以通过软件程序在该数据分流器件内部固化的方式集成在该数据分流器件上。具体可以根据实际使用需求确定,本发明实施例不作限定。
需要说明的是,本发明实施例中,上述安全内存是指电子设备中一个专门受保护的内存模块,在安全内存中存储的图像数据,不允许外部程序访问或修改。上述普通内存是指电子设备中的一个普通内存模块,在普通内存中存储的图像数据,外部程序可以随意访问或修改。
本发明实施例中,在电子设备进行解锁、支付等身份认证的场景中,需要保证采集的图像数据必须安全,不允许外部程序访问或修改,即一般情况下,电子设备将TOF摄像头采集的图像数据直接发送到安全内存,从而,本发明实施例可以采用图像获取模块处理TOF摄像头采集的图像数据(即第一图像),进而可以获取到清晰度大于第一图像的第二图像,因此,电子设备采用存清晰度较高的第二图像进行身份认证的精确度较高。
本发明实施例中,在TOF摄像头采集到第一图像之后,TOF摄像头可以将第一图像传输至数据分流器件。一种可能的实现方式中,在数据分流器件接收到第一图像之后,数据分流器件通过对第一图像进行处理得到第二图像,并将第二图像分别传输至安全内存和普通内存存储。另一种可能的实现方式中,在数据分流器件接收到第一图像之后,数据分流器件可以将第一图像传输至服务器;在服务器接收到第一图像之后,服务器可以对第一图像进行处理,得到第二图像,然后服务器可以再将第二图像传输至数据分流器件;在数据分流器件接收到第二图像之后,数据分流器件可以再将第二图像分别传输至安全内存和普通内存存储。
可选的,本发明实施例中,结合上述图5,如图7所示,上述电子设备20,还可以包括与图像获取模块202连接的第一图像信号处理模块205和第二图像信号处理模块206。其中,第一图像信号处理模块205与安全内存2031连接,第二图像信号处理模块206与普通内存2032连接。
本发明实施例中,上述图像获取模块202,具体可以用于将第二图像分别传输至第一图像信号处理模块205和第二图像信号处理模块206;第一图像信号处理模块205,可以用于将第二图像传输至安全内存2031存储;第二图像信号处理模块206,可以用于将第二图像传输至普通内存2032存储。
可选的,本发明实施例中,上述图像信号处理模块具体可以为图像信号处理器(image signal processor,ISP)。具体的,第一图像信号处理模块可以为第一ISP,第二图像信号处理模块可以为第二ISP。
需要说明的是,通常,ISP可以用于对接收到的图像进行自动曝光、自动对焦和自动白平衡处理等。而本发明实施例中,由于TOF摄像头采集的图像为三维图像,因此TOF摄像头采集的图像可以无需进行自动曝光、自动对焦和自动白平衡等处理。从而,本发明实施例中,ISP可以用于接收第二图像和传输第二图像,即上述第一ISP和第二ISP均可以用于接收图像获取模块传输的第二图像,并将接收到的第二图像分别传输至安全内存和普通内存存储。
可选的,本发明实施例中,上述图像获取模块,具体可以用于通过相机串行接口(camera serial interface,CSI),将第二图像分别传输至第一图像信号处理模块和第二图像信号处理模块。
可以理解,上述图像获取模块,具体可以用于通过图像获取模块的CSI和第一图像信号处理模块的CSI将第二图像传输至第一图像信号处理模块,并通过图像获取模块的CSI和第二图像信号处理模块的CSI将第二图像传输至第二图像信号处理模块。
本发明实施例中,在图像获取模块获取到第二图像之后,图像获取模块可以通过图像获取模块的CSI和第一图像信号处理模块的CSI将第二图像传输至第一图像信号处理模块,并通过图像获取模块的CSI和第二图像信号处理模块的CSI将第二图像传输至第二图像信号处理模块。其中,在第一图像信号处理模块接收到第二图像之后,第一图像信号处理模块可以将第二图像传输至安全内存存储;在第二图像信号处理模块接收到第二图像之后,第二图像信号处理模块可以将第二图像传输至普通内存存储。
本发明实施例中,存储在安全内存中的第二图像可以用于电子设备进行解锁、支付等身份认证的安全类操作。存储在普通内存中的第二图像可以用于电子设备进行AR拍照、AR游戏、测距和虚拟购物等非安全类操作(即普通类操作)。
可选的,本发明实施例中,电子设备可以在TEE环境下采用第二图像进行解锁、支付等身份认证的安全类操作。其中,TEE环境可以为电子设备支持的一种独立运行、且安全的运行环境。
本发明实施例中,由于图像获取模块可以将第二图像,分别传输至安全内存和普通内存存储,因此电子设备既可以采用安全内存中的第二图像进行解锁、支付等身份认证,还可以采用普通内存中的第二图像进行AR拍照、AR游戏等,从而可以增加第二图像的使用场景。
本发明实施例还提供一种图像处理方法,应用于电子设备,该电子设备可以为上述实施例中描述的电子设备20。下面以电子设备为例,对本发明实施例提供的图像处理方法进行示例性的说明。如图8所示,本发明实施例提供的图像处理方法可以包括下述的步骤501-步骤503。
步骤501、电子设备通过电子设备中的TOF摄像头采集第一图像。
本发明实施例中,电子设备可以通过TOF摄像头进行解锁、支付等身份认证的安全类操作。具体地,电子设备可以通过TOF摄像头采集图像(即第一图像),并采用该图像进行解锁、支付等身份认证的安全类操作。
可选的,本发明实施例中,上述第一图像可以为人脸图像,也可以为实物图像等任意可能的图像。具体可以根据实际使用需求确定,本发明实施例不作限定。
示例性地,当电子设备通过TOF摄像头进行身份认证操作时,电子设备可以通过TOF摄像头采集人脸图像或实物图像(例如身份证图像),然后TOF摄像头可以采用采集到的图像进行身份认证。
步骤502、电子设备根据第一图像,获取第二图像。
其中,上述第二图像为对第一图像处理后的图像,且第二图像的清晰度大于第一图像的清晰度。
可选的,本发明实施例中,一种可能的实现方式中,上述S502具体可以通过下述的步骤502a实现。
步骤502a、电子设备对第一图像进行处理,得到第二图像。
本发明实施例中,在电子设备采集到第一图像之后,电子设备可以采用图像处理算法对第一图像进行处理,从而得到第二图像。
对图像处理算法的描述具体可以参见上述实施例中,对图3所示的图像处理流程的相关描述,为避免重复,此处不再赘述。
本发明实施例中,由于TOF摄像头采集的图像容易受到光线、灰尘等多种因素的干扰,因此,当电子设备对TOF摄像头采集的图像进行处理时,电子设备可以采用多种不同的图像处理算法进行处理,例如,有些图像处理算法可以用于降低或消除光线对图像的干扰,有些图像处理算法可以用于降低或消除灰尘对图像的干扰,从而可以保证电子设备对TOF摄像头采集的图像进行处理后的图像的清晰度大于处理前的图像的清晰度,即经过处理后,可以得到更高清晰度的图像。
可选的,本发明实施例中,另一种可能的实现方式中,上述步骤502具体可以通过下述的步骤502b-步骤502c实现。
步骤502b、电子设备向服务器发送第一图像。
步骤502c、电子设备接收服务器发送的第二图像。
本发明实施例中,在电子设备采集到第一图像之后,电子设备可以先向服务器发送第一图像。在服务器接收到第一图像之后,服务器可以通过图像处理算法对第一图像进行处理,得到第二图像,然后服务器可以再将第二图像发送至电子设备。即电子设备获取第二图像。
示例性的,本发明实施例中,服务器可以按照上述如图3所示的图像处理流程对第一图像进行处理。
本发明实施例中,由于电子设备可以将第一图像发送至服务器进行处理,即服务器可以对第一图像进行处理,得到第二图像,因此既可以保证第二图像的清晰度大于第一图像,又可以提升图像处理的速度,减小电子设备的功耗。
步骤503、电子设备存储第二图像。
可选的,本发明实施例中,电子设备中的图像处理模块可以将第二图像传输至电子设备中的图像存储模块存储。
可选的,本发明实施例中,上述图像存储模块可以包括安全内存和普通内存。
本发明实施例中,在电子设备获取到第二图像之后,电子设备中的图像处理模块可以将第二图像分别传输至电子设备安全内存和普通内存存储。具体的,电子设备中的图像获取模块可以先将第二图像分别传输至电子设备中的第一图像信号处理模块和电子设备中的第二图像信号处理模块,然后第一图像信号处理模块可以将第二图像传输至安全内存存储,第二图像信号处理模块可以将第二图像传输至普通内存存储。
本发明实施例提供一种图像处理方法,该方法可以应用于电子设备。具体的,电子设备可以通过电子设备中的TOF摄像头采集第一图像;并根据第一图像,获取第二图像;以及存储第二图像。其中,第二图像为对第一图像处理后的图像,且第二图像的清晰度大于第一图像的清晰度。通过该方案,由于电子设备在存储第一图像之前,可以先对第一图像进行处理,得到清晰度大于第一图像的清晰度的第二图像,并存储第二图像,因此,在电子设备进行解锁、支付等身份认证的场景中,电子设备可以直接采用存储的、清晰度较高的第二图像进行身份认证,从而可以提高电子设备采用TOF摄像头采集的图像进行身份认证的精确度。
进一步地,由于电子设备可以分别将第二图像存储至安全内存和普通内存,因此电子设备既可以采用安全内存中的第二图像进行解锁、支付等身份认证,还可以采用普通内存中的第二图像进行AR拍照、AR游戏等,从而可以增加第二图像的使用场景。
图9为实现本发明各个实施例的一种电子设备的硬件示意图。如图9所示,该电子设备100包括但不限于:射频单元101、网络模块102、音频输出单元103、输入单元104、传感器105、显示单元106、用户输入单元107、接口单元108、存储器109、处理器110、以及电源111、TOF摄像头112(可以为上述实施例中的TOF摄像头201)等部件。本领域技术人员可以理解,图9中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,电子设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
其中,处理器110,可以用于通过电子设备中的TOF摄像头112采集第一图像,并根据第一图像,获取第二图像;以及存储第二图像。
其中,上述TOF摄像头112可以与上述处理器110连接。上述第二图像可以存储在存储器109中。
可以理解,本发明实施例中,上述电子设备的结构示意图(例如上述图1)中的图像获取模块202可以通过上述处理器110实现;上述电子设备的结构示意图(例如上述图1)中的图像存储模块203可以通过上述存储器109实现。
本发明实施例提供一种电子设备,该电子设备可以通过电子设备中的TOF摄像头采集第一图像;并根据第一图像,获取第二图像;以及存储第二图像。其中,第二图像为对第一图像处理后的图像,且第二图像的清晰度大于第一图像的清晰度。通过该方案,由于电子设备在存储第一图像之前,可以先对第一图像进行处理,得到清晰度大于第一图像的清晰度的第二图像,并存储第二图像,因此,在电子设备进行解锁、支付等身份认证的场景中,电子设备可以直接采用存储的、清晰度较高的第二图像进行身份认证,从而可以提高电子设备采用TOF摄像头采集的图像进行身份认证的精确度。
应理解的是,本发明实施例中,射频单元101可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器110处理;另外,将上行的数据发送给基站。通常,射频单元101包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元101还可以通过无线通信系统与网络和其他设备通信。
电子设备通过网络模块102为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元103可以将射频单元101或网络模块102接收的或者在存储器109中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元103还可以提供与电子设备100执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元103包括扬声器、蜂鸣器以及受话器等。
输入单元104用于接收音频或视频信号。输入单元104可以包括图形处理器(graphics processing unit,GPU)1041和麦克风1042,图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(例如TOF摄像头112)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元106上。经图形处理器1041处理后的图像帧可以存储在存储器109(或其它存储介质)中或者经由射频单元101或网络模块102进行发送。麦克风1042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元101发送到移动通信基站的格式输出。
电子设备100还包括至少一种传感器105,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板1061的亮度,接近传感器可在电子设备100移动到耳边时,关闭显示面板1061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别电子设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器105还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元106用于显示由用户输入的信息或提供给用户的信息。显示单元106可包括显示面板1061,可以采用液晶显示器(liquid crystal display,LCD)、有机发光二极管(organic light-emitting diode,OLED)等形式来配置显示面板1061。
用户输入单元107可用于接收输入的数字或字符信息,以及产生与电子设备的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元107包括触控面板1071以及其他输入设备1072。触控面板1071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板1071上或在触控面板1071附近的操作)。触控面板1071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器110,接收处理器110发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板1071。除了触控面板1071,用户输入单元107还可以包括其他输入设备1072。具体地,其他输入设备1072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板1071可覆盖在显示面板1061上,当触控面板1071检测到在其上或附近的触摸操作后,传送给处理器110以确定触摸事件的类型,随后处理器110根据触摸事件的类型在显示面板1061上提供相应的视觉输出。虽然在图9中,触控面板1071与显示面板1061是作为两个独立的部件来实现电子设备的输入和输出功能,但是在某些实施例中,可以将触控面板1071与显示面板1061集成而实现电子设备的输入和输出功能,具体此处不做限定。
接口单元108为外部装置与电子设备100连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元108可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到电子设备100内的一个或多个元件或者可以用于在电子设备100和外部装置之间传输数据。
存储器109可用于存储软件程序以及各种数据。存储器109可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器109可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器110是电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器109内的软件程序和/或模块,以及调用存储在存储器109内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。处理器110可包括一个或多个处理单元;可选的,处理器110可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器110中。
电子设备100还可以包括给各个部件供电的电源111(比如电池),可选的,电源111可以通过电源管理系统与处理器110逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外,电子设备100包括一些未示出的功能模块,在此不再赘述。
可选的,本发明实施例还提供一种电子设备,包括如图9所示的处理器110、存储器109,以及存储在存储器109上并可在处理器110上运行的计算机程序,该计算机程序被处理器110执行时可以实现上述方法实施例中电子设备执行的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
可选的,本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时可以实现上述方法实施例中的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,该计算机可读存储介质可以包括只读存储器(read-only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台电子设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
Claims (14)
1.一种电子设备,其特征在于,所述电子设备包括飞行时间TOF摄像头、与所述TOF摄像头连接的图像获取模块,以及与所述图像获取模块连接的图像存储模块;其中,
所述TOF摄像头,用于采集第一图像,并将所述第一图像传输至所述图像获取模块;
所述图像获取模块,用于根据所述第一图像,获取第二图像,并将所述第二图像传输至所述图像存储模块存储,所述第二图像为对所述第一图像处理后的图像,且所述第二图像的清晰度大于所述第一图像。
2.根据权利要求1所述的电子设备,其特征在于,
所述图像获取模块,具体用于对所述第一图像进行处理,得到所述第二图像。
3.根据权利要求1所述的电子设备,其特征在于,
所述图像获取模块,具体用于向服务器发送所述第一图像,并接收所述服务器发送的所述第二图像。
4.根据权利要求1所述的电子设备,其特征在于,所述图像存储模块包括安全内存和普通内存;
所述图像获取模块,具体用于将所述第二图像分别传输至所述安全内存和所述普通内存存储。
5.根据权利要求4所述的电子设备,其特征在于,所述电子设备还包括与所述图像获取模块连接的第一图像信号处理模块和第二图像信号处理模块,所述第一图像信号处理模块与所述安全内存连接,所述第二图像信号处理模块与所述普通内存连接;
所述图像获取模块,具体用于将所述第二图像分别传输至所述第一图像信号处理模块和所述第二图像信号处理模块;
所述第一图像信号处理模块,用于将所述第二图像传输至所述安全内存存储;
所述第二图像信号处理模块,用于将所述第二图像传输至所述普通内存存储。
6.根据权利要求5所述的电子设备,其特征在于,所述图像获取模块,具体用于通过相机串行接口CSI,将所述第二图像分别传输至所述第一图像信号处理模块和所述第二图像信号处理模块。
7.根据权利要求4至6中任一项所述的电子设备,其特征在于,所述图像获取模块为数据分流器件。
8.一种图像处理方法,应用于电子设备,其特征在于,所述方法包括:
通过所述电子设备中的TOF摄像头采集第一图像;
根据所述第一图像,获取第二图像,所述第二图像为对所述第一图像处理后的图像,且所述第二图像的清晰度大于所述第一图像的清晰度;
存储所述第二图像。
9.根据权利要求8所述的方法,其特征在于,所述根据所述第一图像,获取第二图像,包括:
对所述第一图像进行处理,得到所述第二图像。
10.根据权利要求8所述的方法,其特征在于,所述根据所述第一图像,获取第二图像,包括:
向服务器发送所述第一图像;
接收所述服务器发送的所述第二图像。
11.根据权利要求8至10中任一项所述的方法,其特征在于,所述存储所述第二图像,包括:
所述电子设备中的图像获取模块将所述第二图像分别传输至所述电子设备中的安全内存和普通内存存储。
12.根据权利要求11所述的方法,其特征在于,所述电子设备中的图像获取模块将所述第二图像分别传输至所述电子设备中的安全内存和普通内存存储,包括:
所述图像获取模块将所述第二图像分别传输至所述电子设备中的第一图像信号处理模块和所述电子设备中的第二图像信号处理模块;
所述第一图像信号处理模块将所述第二图像传输至所述安全内存存储;
所述第二图像信号处理模块将所述第二图像传输至所述普通内存存储。
13.一种电子设备,其特征在于,所述电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求8至12中任一项所述的图像处理方法的步骤。
14.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如权利要求8至12中任一项所述的图像处理方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911202504.0A CN110933307A (zh) | 2019-11-29 | 2019-11-29 | 一种电子设备及图像处理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911202504.0A CN110933307A (zh) | 2019-11-29 | 2019-11-29 | 一种电子设备及图像处理方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110933307A true CN110933307A (zh) | 2020-03-27 |
Family
ID=69847076
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911202504.0A Pending CN110933307A (zh) | 2019-11-29 | 2019-11-29 | 一种电子设备及图像处理方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110933307A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113779588A (zh) * | 2021-08-12 | 2021-12-10 | 荣耀终端有限公司 | 面部识别方法及装置 |
CN113781341A (zh) * | 2021-09-03 | 2021-12-10 | 北京达佳互联信息技术有限公司 | 图像处理方法、装置、电子设备及存储介质 |
CN113780090A (zh) * | 2021-08-12 | 2021-12-10 | 荣耀终端有限公司 | 数据处理方法及装置 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW201123034A (en) * | 2009-12-24 | 2011-07-01 | Hon Hai Prec Ind Co Ltd | Face recognizing system, method, and identity recognizing apparatus with the face recognizing system |
CN106384106A (zh) * | 2016-10-24 | 2017-02-08 | 杭州非白三维科技有限公司 | 一种基于三维扫描的反欺诈人脸识别系统 |
CN109063442A (zh) * | 2018-06-26 | 2018-12-21 | 阿里巴巴集团控股有限公司 | 业务实现、相机实现的方法和装置 |
CN109683698A (zh) * | 2018-12-25 | 2019-04-26 | Oppo广东移动通信有限公司 | 支付验证方法、装置、电子设备和计算机可读存储介质 |
CN109903241A (zh) * | 2019-01-31 | 2019-06-18 | 武汉市聚芯微电子有限责任公司 | 一种tof相机系统的深度图像校准方法及系统 |
CN110287860A (zh) * | 2019-06-21 | 2019-09-27 | 深圳金士盾科技实业有限公司 | 一种带有脸部识别的手机安全支付方法 |
-
2019
- 2019-11-29 CN CN201911202504.0A patent/CN110933307A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW201123034A (en) * | 2009-12-24 | 2011-07-01 | Hon Hai Prec Ind Co Ltd | Face recognizing system, method, and identity recognizing apparatus with the face recognizing system |
CN106384106A (zh) * | 2016-10-24 | 2017-02-08 | 杭州非白三维科技有限公司 | 一种基于三维扫描的反欺诈人脸识别系统 |
CN109063442A (zh) * | 2018-06-26 | 2018-12-21 | 阿里巴巴集团控股有限公司 | 业务实现、相机实现的方法和装置 |
CN109683698A (zh) * | 2018-12-25 | 2019-04-26 | Oppo广东移动通信有限公司 | 支付验证方法、装置、电子设备和计算机可读存储介质 |
CN109903241A (zh) * | 2019-01-31 | 2019-06-18 | 武汉市聚芯微电子有限责任公司 | 一种tof相机系统的深度图像校准方法及系统 |
CN110287860A (zh) * | 2019-06-21 | 2019-09-27 | 深圳金士盾科技实业有限公司 | 一种带有脸部识别的手机安全支付方法 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113779588A (zh) * | 2021-08-12 | 2021-12-10 | 荣耀终端有限公司 | 面部识别方法及装置 |
CN113780090A (zh) * | 2021-08-12 | 2021-12-10 | 荣耀终端有限公司 | 数据处理方法及装置 |
WO2023015995A1 (zh) * | 2021-08-12 | 2023-02-16 | 荣耀终端有限公司 | 数据处理方法及装置 |
WO2023015996A1 (zh) * | 2021-08-12 | 2023-02-16 | 荣耀终端有限公司 | 面部识别方法及装置 |
CN113781341A (zh) * | 2021-09-03 | 2021-12-10 | 北京达佳互联信息技术有限公司 | 图像处理方法、装置、电子设备及存储介质 |
CN113781341B (zh) * | 2021-09-03 | 2024-02-27 | 北京达佳互联信息技术有限公司 | 图像处理方法、装置、电子设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110913132B (zh) | 对象跟踪方法及电子设备 | |
CN110719402B (zh) | 图像处理方法及终端设备 | |
CN107977144B (zh) | 一种截屏处理方法及移动终端 | |
CN108459797B (zh) | 一种折叠屏的控制方法及移动终端 | |
CN108038825B (zh) | 一种图像处理方法及移动终端 | |
CN109241832B (zh) | 一种人脸活体检测的方法及终端设备 | |
CN107730460B (zh) | 一种图像处理方法及移动终端 | |
CN111031234B (zh) | 一种图像处理方法及电子设备 | |
CN109005355B (zh) | 一种拍摄方法及移动终端 | |
CN111401463A (zh) | 检测结果输出的方法、电子设备及介质 | |
CN110933307A (zh) | 一种电子设备及图像处理方法 | |
CN110868546B (zh) | 一种拍摄方法及电子设备 | |
CN110312070B (zh) | 一种图像处理方法及终端 | |
CN109104573B (zh) | 一种确定对焦点的方法及终端设备 | |
CN111597540A (zh) | 应用程序的登录方法、电子设备及可读存储介质 | |
CN107798662B (zh) | 一种图像处理方法及移动终端 | |
CN111131930B (zh) | 设备资源控制方法、第一电子设备及计算机可读存储介质 | |
CN110769162B (zh) | 电子设备及对焦方法 | |
CN108965701B (zh) | 一种抖动矫正方法及终端设备 | |
CN111443796A (zh) | 一种信息处理方法及装置 | |
CN110781331A (zh) | 一种图片显示方法、电子设备及计算机可读存储介质 | |
CN110933305B (zh) | 电子设备及对焦方法 | |
CN110995816B (zh) | 分享方法及电子设备 | |
CN110830724B (zh) | 一种拍摄方法及电子设备 | |
CN109547773B (zh) | 控制方法及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200327 |
|
RJ01 | Rejection of invention patent application after publication |