CN116389894A - 一种红外补光图像拍摄方法、终端设备及装置 - Google Patents
一种红外补光图像拍摄方法、终端设备及装置 Download PDFInfo
- Publication number
- CN116389894A CN116389894A CN202310325304.4A CN202310325304A CN116389894A CN 116389894 A CN116389894 A CN 116389894A CN 202310325304 A CN202310325304 A CN 202310325304A CN 116389894 A CN116389894 A CN 116389894A
- Authority
- CN
- China
- Prior art keywords
- image
- processed
- infrared lamp
- face
- light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000001502 supplementing effect Effects 0.000 title claims abstract description 80
- 238000000034 method Methods 0.000 title claims abstract description 56
- 230000001960 triggered effect Effects 0.000 claims abstract description 14
- 239000013589 supplement Substances 0.000 claims description 29
- 238000005516 engineering process Methods 0.000 claims description 3
- 238000010191 image analysis Methods 0.000 claims description 3
- 230000002194 synthesizing effect Effects 0.000 claims description 3
- 230000004044 response Effects 0.000 abstract description 9
- 238000010586 diagram Methods 0.000 description 21
- 239000010410 layer Substances 0.000 description 18
- 230000006870 function Effects 0.000 description 15
- 238000004590 computer program Methods 0.000 description 13
- 238000012545 processing Methods 0.000 description 13
- 238000007726 management method Methods 0.000 description 8
- 230000003287 optical effect Effects 0.000 description 7
- 238000003384 imaging method Methods 0.000 description 5
- 239000000725 suspension Substances 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 230000001815 facial effect Effects 0.000 description 3
- 238000005286 illumination Methods 0.000 description 3
- 230000003993 interaction Effects 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 244000273256 Phragmites communis Species 0.000 description 2
- 235000014676 Phragmites communis Nutrition 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 239000002184 metal Substances 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000012792 core layer Substances 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000003703 image analysis method Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000010408 sweeping Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B15/00—Special procedures for taking photographs; Apparatus therefor
- G03B15/02—Illuminating scene
- G03B15/03—Combinations of cameras with lighting apparatus; Flash units
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
- Y02B20/00—Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
- Y02B20/40—Control techniques providing energy savings, e.g. smart controller or presence detection
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
本申请公开了一种红外补光图像拍摄方法、终端设备及装置。本申请响应于用户触发的针对待处理图像的采集操作,启动第一红外灯并控制摄像头采集待处理图像;若检测到待处理图像中存在至少一个人脸轮廓,则确定至少一个人脸轮廓在待处理图像中的第一位置;针对至少一个人脸轮廓中的任意一个待处理人脸轮廓,将第二红外灯移动到待处理人脸轮廓的第一位置对应的第二位置,并对待处理人脸轮廓进行补光,同时控制摄像头采集第二红外灯进行补光之后的参考图像;基于得到的参考图像,确定待处理图像对应的目标图像。通过移动第二红外灯的位置,对较远距离的人脸轮廓进行补光,有效地提高了终端设备在夜间拍摄人脸的能力。
Description
技术领域
本申请涉及终端技术领域,特别涉及一种红外补光图像拍摄方法、终端设备及装置。
背景技术
现有技术中,在执法记录仪等需要利用红外灯补光实现夜间拍照或录像的便携式设备中,夜间拍照或录像会使用专用的红外摄像头,该摄像头需要红外灯补光以实现较远距离的人物成像,但受限于便携式设备的体积和电池容量,红外补光灯的功率不可能做到非常大,因此其红外补光的有效照明距离有限,一般只能对较近距离内的人脸进行清晰的辨认,对于更远距离外的人脸,却因为红外灯的补光距离有限,无法被清晰的拍摄到,造成执法记录仪等便携式设备在夜间拍摄时对较远距离的人脸辨识度低下。因此亟需一种提高执法记录仪等便携式设备夜间拍摄距离,提高中远距离外人脸辨识度的方法。
发明内容
本申请的目的是提供一种红外补光图像拍摄方法、终端设备及装置,用以解决执法记录仪等便携式设备夜间拍摄时红外补光距离较近,较远距离的人脸因红外补光不足而拍摄不清晰的问题。
第一方面,本申请提供一种红外补光图像拍摄方法,所述方法应用于终端设备,所述终端设备包括摄像头、第一红外灯和可移动的第二红外灯,所述第一红外灯的补光角度范围大于所述第二红外灯的补光角度范围,且所述第一红外灯的补光距离小于所述第二红外灯的补光距离,所述方法包括:
响应于用户触发的针对待处理图像的采集操作,启动所述第一红外灯并控制所述摄像头采集待处理图像;
若检测到所述待处理图像中存在至少一个人脸轮廓,则确定所述至少一个人脸轮廓在所述待处理图像中的第一位置;
针对所述至少一个人脸轮廓中的任意一个待处理人脸轮廓,分别执行以下操作:将所述第二红外灯移动到所述待处理人脸轮廓的第一位置对应的第二位置,并对所述待处理人脸轮廓进行补光,同时控制所述摄像头采集所述第二红外灯进行补光之后的参考图像;其中所述第一位置表征人脸轮廓在所述待处理图像中的位置,所述第二位置表征第二红外灯在所述终端设备中的位置;
基于得到的所述参考图像,确定所述待处理图像对应的目标图像。
第二方面,本申请提供一种终端设备,所述终端设备包括:
摄像头、第一红外灯、可移动的第二红外灯、处理器和存储器;
所述摄像头,用于红外拍摄和采集待处理图像;
所述第一红外灯和所述可移动的第二红外灯为所述待处理图像中的人脸进行补光;其中,所述第一红外灯的补光角度范围大于所述第二红外灯的补光角度范围,且所述第一红外灯的补光距离小于所述第二红外灯的补光距离;
所述存储器,用于存储所述处理器可执行指令;
所述处理器,被配置为执行如上述第一方面中任一项所述的红外补光图像拍摄方法。
第三方面,本申请提供一种红外补光图像拍摄装置,所述装置应用于终端设备,所述终端设备包括摄像头、第一红外灯和可移动的第二红外灯,所述第一红外灯的补光角度范围大于所述第二红外灯的补光角度范围,且所述第一红外灯的补光距离小于所述第二红外灯的补光距离,所述装置包括:
第一补光模块,用于响应于用户触发的针对待处理图像的采集操作,启动所述第一红外灯并控制所述摄像头采集待处理图像;
位置确定模块,用于若检测到所述待处理图像中存在至少一个人脸轮廓,则确定所述至少一个人脸轮廓在所述待处理图像中的第一位置;
第二补光模块,用于针对所述至少一个人脸轮廓中的任意一个待处理人脸轮廓,分别执行以下操作:将所述第二红外灯移动到所述待处理人脸轮廓的第一位置对应的第二位置,并对所述待处理人脸轮廓进行补光,同时控制所述摄像头采集所述第二红外灯进行补光之后的参考图像;其中所述第一位置表征人脸轮廓在所述待处理图像中的位置,所述第二位置表征第二红外灯在所述终端设备中的位置;
目标图像确定模块,用于基于得到的所述参考图像,确定所述待处理图像对应的目标图像。
第四方面,本申请提供一种计算机可读存储介质,当所述计算机可读存储介质中的指令由终端设备执行时,使得所述终端设备能够执行如上述第一方面中任一项所述的红外补光图像拍摄方法。
第五方面,本申请提供一种计算机程序产品,包括计算机程序:
所述计算机程序被处理器执行时实现如上述第一方面中任一项所述的红外补光图像拍摄方法。
本申请的实施例提供的技术方案至少带来以下有益效果:
本申请实施例通过在终端设备中设置一个摄像头、第一红外灯和可移动的第二红外灯;其中第一红外灯的补光角度范围大于第二红外灯的补光角度范围,且第一红外灯的补光距离小于第二红外灯的补光距离;在响应于用户触发的针对待处理图像的采集操作,启动第一红外灯并控制摄像头采集待处理图像之后,若检测到待处理图像中存在至少一个人脸轮廓,则确定至少一个人脸轮廓在待处理图像中的第一位置;针对至少一个人脸轮廓中的任意一个待处理人脸轮廓,将第二红外灯移动到待处理人脸轮廓的第一位置对应的第二位置,并对待处理人脸轮廓进行补光,同时控制摄像头采集第二红外灯进行补光之后的参考图像;其中第一位置表征人脸轮廓在待处理图像中的位置,第二位置表征第二红外灯在终端设备中的位置;基于得到的参考图像,确定待处理图像对应的目标图像。
由此,本申请中第一红外灯主要在较近补光距离内对人脸轮廓进行红外补光,而第二红外灯则将红外光聚拢在较窄的补光角度范围内以实现较远补光距离上对人脸轮廓进行红外补光;同时通过移动第二红外灯的位置,实现第二红外灯的红外光束在摄像头视野内自由移动,进而实现对摄像头画面内较远距离的人脸轮廓进行补光,有效地提高了执法记录仪等终端设备夜间清晰拍摄人脸的有效距离。
本申请的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本申请而了解。本申请的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对本申请实施例中所需要使用的附图作简单地介绍,显而易见地,下面所介绍的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种终端设备的结构示意图;
图2为本申请实施例提供的一种终端设备的软件结构框图;
图3为本申请实施例提供的一种红外补光图像拍摄方法的应用场景示意图;
图4为本申请实施例提供的一种红外补光图像拍摄方法的流程示意图;
图5为本申请实施例提供的一种终端设备的示意图;
图6为本申请实施例提供的一种用户触发的针对待处理图像的采集操作的示意图;
图7为本申请实施例提供的一种用户触发的针对待处理图像的采集操作的示意图;
图8为本申请实施例提供的一种确定各人脸轮廓在待处理图像中的第一位置的流程示意图;
图9为本申请实施例提供的一种预设的面部轮廓关键点的示意图;
图10为本申请实施例提供的一种确定待处理人脸轮廓的流程图;
图11为本申请实施例提供的第一红外灯进行补光之后采集的待处理图像的示意图;
图12为本申请实施例提供的一种将第二红外灯移动到第二位置的流程图;
图13为本申请实施例提供的一种确定人脸轮廓的第一位置与第二位置的预设对应关系的流程示意图;
图14为本申请实施例提供的一种活动部件和第二红外灯的示意图;
图15为本申请实施例提供的一种活动部件和第二红外灯的示意图;
图16为本申请实施例提供的一种像素点的第一位置的示意图;
图17为本申请实施例提供的一种确定待处理图像的目标图像的流程图;
图18为本申请实施例提供的一种红外补光图像拍摄方法的完整流程图;
图19为本申请实施例提供的一种终端设备的示意图;
图20为本申请实施例提供的一种红外补光图像拍摄装置的示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。其中,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本申请保护的范围。
并且,在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;文本中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况,另外,在本申请实施例的描述中,“多个”是指两个或多于两个。
以下,术语“第一”、“第二”仅用于描述目的,而不能理解为暗示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”、的特征可以明示或者隐含地包括一个或者更多个该特征,在本申请实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
在执法记录仪等需要利用红外灯补光实现夜间拍照或录像的便携式警务终端中,夜间拍照或录像会使用红外摄像头。该摄像头需要红外灯补光以实现人物成像,但受限于便携式设备的体积和电池容量,红外补光灯的功率不可能做到非常大。
现有技术中,其中的红外补光灯均为固定视野和固定红外光发射角度的设计,因此其红外补光的有效照明距离有限,一般只能在红外摄像头很近距离以内的人脸可以被清晰的辨认,对于更远距离外的人脸,却因为红外光能量分散较大,照度下降,红外摄像头成像时人脸反射光比较暗,无法被清晰识别,造成执法记录仪等便携式设备在夜间拍摄时对较远距离的人脸辨识度低下。因此亟需一种提高执法记录仪等便携式设备夜间拍摄距离,提高中远距离外人脸辨识度的方法。
有鉴于此,本申请提供了一种红外补光图像拍摄方法、终端设备及装置,用以解决执法记录仪等便携式设备夜间拍摄时红外补光距离较近,较远距离的人脸因红外补光不足而拍摄不清晰的问题。
本申请的发明构思可概括为:本申请实施例中通过在终端设备中设置一个摄像头、第一红外灯和可移动的第二红外灯;其中第一红外灯的补光角度范围大于第二红外灯的补光角度范围,且第一红外灯的补光距离小于第二红外灯的补光距离;在响应于用户触发的针对待处理图像的采集操作,启动第一红外灯并控制摄像头采集待处理图像之后,若检测到待处理图像中存在至少一个人脸轮廓,则确定至少一个人脸轮廓在待处理图像中的第一位置;针对至少一个人脸轮廓中的任意一个待处理人脸轮廓,将第二红外灯移动到待处理人脸轮廓的第一位置对应的第二位置,并对待处理人脸轮廓进行补光,同时控制摄像头采集第二红外灯进行补光之后的参考图像;其中第一位置表征人脸轮廓在待处理图像中的位置,第二位置表征第二红外灯在终端设备中的位置;基于得到的参考图像,确定待处理图像对应的目标图像。由此,实现了对摄像头画面内较远距离的人脸轮廓进行补光,有效地提高了执法记录仪等终端设备夜间拍摄人脸的识别距离和在夜间识别人脸的能力。
在介绍完本申请实施例的主要发明思想之后,下面先对本申请提供的终端设备进行说明。图1示出了一种终端设备100的结构示意图。应该理解的是,图1所示终端设备100仅是一个范例,并且终端设备100可以具有比图1中所示的更多的或者更少的部件,可以组合两个或多个的部件,或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
图1中示例性示出了根据示例性实施例中终端设备100的硬件配置框图。如图1所示,终端设备100包括:射频(radio frequency,RF)电路110、存储器120、显示单元130、摄像头140、传感器150、音频电路160、无线保真(Wireless Fidelity,Wi-Fi)模块170、处理器180、蓝牙模块181、以及电源190等部件。
RF电路110可用于在收发多媒体信息过程中信号的接收和发送,可以接收基站的下行数据后交给处理器180处理;可以将上行数据发送给基站。通常,RF电路包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等器件。
存储器120可用于存储软件程序及数据。处理器180通过运行存储在存储器120的软件程序或数据,从而执行终端设备100的各种功能以及数据处理。存储器120可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。存储器120存储有使得终端设备100能运行的操作系统。本申请中存储器120可以存储操作系统及各种应用程序,还可以存储执行本申请实施例红外补光图像拍摄方法的程序代码。
显示单元130可用于接收输入的数字或字符等多媒体信息,产生与终端设备100的用户设置以及功能控制有关的信号输入,具体地,显示单元130可以包括设置在终端设备100正面的触摸屏131。
显示单元130还可用于显示由用户输入的信息或提供给用户的信息以及终端设备100的各种菜单的图形用户界面(graphical user interface,GUI)。具体地,显示单元130可以包括设置在终端设备100正面的显示屏132。其中,显示屏132可以采用液晶显示器、发光二极管等形式来配置。显示单元130可以用于显示本申请中终端设备的采集的待处理图像和第二红外光进行补光之后的参考图像和目标图像。
其中,触摸屏131可以覆盖在显示屏132之上,也可以将触摸屏131与显示屏132集成而实现终端设备100的输入和输出功能,集成后可以简称触摸显示屏。
摄像头140可用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给处理器180转换成数字图像信号。
终端设备100还可以包括至少一种传感器150,比如加速度传感器151、距离传感器152、指纹传感器153、温度传感器154。终端设备100还可配置有陀螺仪、气压计、湿度计、温度计、红外线传感器、光传感器、运动传感器等其他传感器。
音频电路160、扬声器161、麦克风162可提供用户与终端设备100之间的音频接口。音频电路160可将接收到的音频数据转换后的电信号,传输到扬声器161,由扬声器161转换为声音信号输出。终端设备100还可配置音量按钮,用于调节声音信号的音量,还可以用于组合其他按钮执行相应的操作。另一方面,麦克风162将收集的声音信号转换为电信号,由音频电路160接收后转换为音频数据,再将音频数据输出至RF电路110以发送给比如另一终端设备,或者将音频数据输出至存储器120以便进一步处理。
Wi-Fi属于短距离无线传输技术,终端设备100可以通过Wi-Fi模块170帮助用户收发电子邮件、浏览网页和访问流媒体等,它为用户提供了无线的宽带互联网访问。
处理器180是终端设备100的控制中心,利用各种接口和线路连接整个终端设备的各个部分,通过运行或执行存储在存储器120内的软件程序,以及调用存储在存储器120内的数据,执行终端设备100的各种功能和处理数据。在一些实施例中,处理器180可包括一个或多个处理单元;处理器180还可以集成应用处理器和基带处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,基带处理器主要处理无线通信。可以理解的是,上述基带处理器也可以不集成到处理器180中。本申请中处理器180可以运行操作系统、应用程序、用户界面显示及触控响应,以及本申请实施例的红外补光图像拍摄方法。另外,处理器180与显示单元130耦接。
蓝牙模块181,用于通过蓝牙协议来与其他具有蓝牙模块的蓝牙设备进行信息交互。例如,终端设备100可以通过蓝牙模块181与同样具备蓝牙模块的可穿戴电子设备(例如智能手表)建立蓝牙连接,从而进行数据交互。
终端设备100还包括给各个部件供电的电源190(比如电池)。电源可以通过电源管理系统与处理器180逻辑相连,从而通过电源管理系统实现管理充电、放电以及功耗等功能。终端设备100还可配置有电源按钮,用于终端设备的开机和关机,以及锁屏等功能。
图2是本申请实施例的终端设备100的软件结构框图。
分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,可将Android系统分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(Android runtime)和系统库,以及内核层。
应用程序层可以包括一系列应用程序包。
如图2所示,应用程序包可以包括摄像机,图库,日历,通话,地图,导航,WLAN,蓝牙,视频,录音等应用程序。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图2所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿、短信息等。
视图系统包括可视控件,例如摄像机的用户界面,该用户界面可包括显示文字的控件,显示图片的控件、选择场景标识的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信息通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
网络管理器用于提供终端设备100的通信功能,以及提供网络(包括数据和Wifi)的连接状态和传输接口,例如判断网络是否可用以及通过传输接口接收和发送数据包等。
资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等。
通知管理器使应用程序可以在状态栏中显示通知信息(例如短信息的消息摘要,消息内容、场景标识有更新的通知),可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,终端设备振动,指示灯闪烁等。
Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。
核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(Media Libraries),三维图形处理库(例如:OpenGL ES),2D图形引擎(例如:SGL)等。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D和3D图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
2D(一种动画方式)图形引擎是2D绘图的绘图引擎。
内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动。
其中,本申请中的终端设备包括但不限于执法记录仪等需要利用红外灯补光实现夜间拍照或录像的便携式终端。
在介绍完本申请实施例的终端设备之后,下面对本申请实施例的提供的红外补光图像拍摄方法能够适用的应用场景做一些简单介绍,需要说明的是,以下介绍的应用场景仅用于说明本申请实施例而非限定。在具体实施时,可以根据实际需要灵活地应用本申请实施例提供的技术方案。
参考图3,其为本申请实施例提供的红外补光图像拍摄方法的应用场景示意图。该应用场景包括终端设备100、用户101、待处理人脸轮廓102以及服务器103。其中,终端设备100和服务器103之间通过无线或有线网络连接。
其中,终端设备100中包括一个摄像头、第一红外灯和可移动的第二红外灯;其中第一红外灯的补光角度范围大于第二红外灯的补光角度范围,且第一红外灯的补光距离小于第二红外灯的补光距离;在响应于用户101触发的针对待处理图像的采集操作,启动第一红外灯并控制摄像头采集待处理图像之后,若检测到待处理图像中存在至少一个人脸轮廓,则确定至少一个人脸轮廓在待处理图像中的第一位置;针对至少一个人脸轮廓中的任意一个待处理人脸轮廓102,将第二红外灯移动到待处理人脸轮廓102的第一位置对应的第二位置,并对待处理人脸轮廓102进行补光,同时控制摄像头采集第二红外灯进行补光之后的参考图像,并将参考图像保存至服务器103中;基于得到的参考图像,确定待处理图像对应的目标图像。
当然,本申请实施例提供的方法并不限于图3所示的应用场景,还可以用于其它可能的应用场景,本申请实施例并不进行限制。对于图3所示的应用场景的各个设备所能实现的功能将在后续的方法实施例中一并进行描述,在此先不过多赘述。
为了便于理解本申请实施例提供的红外补光图像拍摄方法,下面结合附图对此进行进一步说明。
图4为本申请实施例提供的一种红外补光图像拍摄方法的流程示意图。该方法应用于终端设备,如图5所示,该终端设备包括摄像头、第一红外灯和可移动的第二红外灯;其中第一红外灯为常规红外灯,第一红外灯的补光角度范围大于第二红外灯的补光角度范围,且第一红外灯的补光距离小于第二红外灯的补光距离;第一红外灯在较大补光角度范围内为摄像头视野内的对象进行补光;而可移动的第二红外灯将红外光束缩小到较小的补光角度范围,从而增加补光距离,为摄像头视野内较远距离的对象进行补光。如图4所示,该方法具体包括以下步骤:
在步骤401中,响应于用户触发的针对待处理图像的采集操作,启动第一红外灯并控制摄像头采集待处理图像。
具体实施时,如图6所示,携带执法记录仪等终端设备的用户触发终端设备上针对待处理图像的采集操作的“拍照”按钮,或者,如图7所示,携带执法记录仪等终端设备的用户触发终端设备上针对待处理图像的采集操作的“录像”按钮,同时启动第一红外灯并控制摄像头采集待处理图像。其中待处理图像中的各个目标对象均为在第一红外灯补光之后摄像头可以拍摄到的对象。
在步骤402中,若检测到待处理图像中存在至少一个人脸轮廓,则确定至少一个人脸轮廓在待处理图像中的第一位置。
在一种可能的实施方式中,本申请实施例中若检测到待处理图像中存在至少一个人脸轮廓,则确定至少一个人脸轮廓在待处理图像中的第一位置,可以执行为如图8所示的步骤:
在步骤801中,利用图像分析技术提取出待处理图像中的特征关键点。
在步骤802中,基于特征关键点和预设的面部轮廓关键点,确定待处理图像中的至少一个人脸轮廓。
在步骤803中,针对每个人脸轮廓,将人脸轮廓的中心像素点在待处理图像中的位置,作为人脸轮廓在待处理图像中的第一位置。
具体实施时,如图9所示,为预设的面部轮廓关键点。在通过摄像头的待处理图像识别待处理图像中的人物轮廓位置,利用图像分析方法定位待处理图像中的特征关键点之后,可以将待处理图像中的特征关键点与预设的面部轮廓关键点进行比较,从而获得待处理图像中的至少一个人脸轮廓,然后将人脸轮廓的中心像素点作为人脸轮廓在待处理图像中的第一位置。
其中,预设的面部轮廓关键点可以根据实际需要进行设置,本申请实施例对此不做限制。
在步骤403中,针对至少一个人脸轮廓中的任意一个待处理人脸轮廓,分别执行以下操作:将第二红外灯移动到待处理人脸轮廓的第一位置对应的第二位置,并对待处理人脸轮廓进行补光,同时控制摄像头采集第二红外灯进行补光之后的参考图像。
其中,第一位置表征人脸轮廓在待处理图像中的位置,第二位置表征第二红外灯在终端设备中的位置。其中,第二红外灯在对待处理人脸轮廓进行补光时是将光束对准该待处理人脸轮廓对应的实际人脸,然后对实际人脸进行补光。
在一种可能的实施方式中,本申请实施例中可以针对待处理图像中的至少一个人脸轮廓中的每一个人脸轮廓,都执行将第二红外灯移动到人脸轮廓的第一位置对应的第二位置,并对人脸轮廓进行补光,同时控制摄像头采集第二红外灯进行补光之后的参考图像的操作。
在另一种可能的实施方式中,本申请实施例中还可以针对待处理图像中的至少一个人脸轮廓中的待处理人脸轮廓,执行将第二红外灯移动到待处理人脸轮廓的第一位置对应的第二位置,并对待处理人脸轮廓进行补光,同时控制摄像头采集第二红外灯进行补光之后的参考图像的操作,具体可以针对至少一个人脸轮廓中的任意一个人脸轮廓,分别执行如图10所示的步骤:
在步骤1001中,确定人脸轮廓包括的人脸面积占待处理图像面积的第一比值;
在步骤1002中,基于人脸面积占图像面积的比值,与人脸距摄像头的实际距离之间的预设对应关系,确定第一比值对应的实际距离;
其中人脸面积占图像面积的比值,与人脸距摄像头的实际距离之间的预设对应关系可以根据实验得到,也可以根据实际需要进行设置,本申请实施例对此不做限制。
在步骤1003中,若第一比值对应的实际距离大于预设距离阈值,则确定人脸轮廓为待处理人脸轮廓。
其中人脸面积占图像面积的比值,与人脸距摄像头的实际距离成反比。人脸面积占图像面积的比值越大,人脸距摄像头的实际距离越近。其中,预设距离阈值可以根据实际需要进行设置,本申请实施例对此不做限制。
具体实施时,如图11所示,为第一红外灯进行补光之后摄像头采集的待处理图像,其中共有5个人脸轮廓,首先确定该5个人脸轮廓中的每个人脸轮廓包括的人脸面积占待处理图像面积的第一比值;然后基于人脸面积占图像面积的比值,与人脸距摄像头的实际距离之间的预设对应关系,确定第一比值对应的实际距离;若第一比值对应的实际距离大于预设距离阈值,则确定人脸轮廓为待处理人脸轮廓。
图11中人脸轮廓1和人脸轮廓2包括的人脸面积占待处理图像面积的第一比值明显大于人脸轮廓3、4、5包括的人脸面积占待处理图像面积的第一比值,而根据人脸面积占图像面积的比值,与人脸距摄像头的实际距离之间的预设对应关系,可以确定人脸轮廓1和人脸轮廓2包括的人脸面积占待处理图像面积的第一比值对应的实际距离小于预设距离阈值,人脸轮廓3、4、5包括的人脸面积占待处理图像面积的第一比值对应的实际距离大于预设距离阈值,因此确定人脸轮廓3、4、5为待处理人脸轮廓。
在一种可能的实施方式中,本申请实施例中的方法还可以执行为:若待处理图像的至少一个人脸轮廓中包括多个待处理人脸轮廓,则根据各待处理人脸轮廓对应的实际距离,确定将第二红外灯移动到待处理人脸轮廓的第一位置对应的第二位置,并对待处理人脸轮廓进行补光的顺序。
具体实施时,可以根据实际距离从大到小的顺序,对将第二红外灯移动到各个待处理人脸轮廓的第一位置对应的第二位置,并对各个待处理人脸轮廓进行补光;或者根据实际距离从小到大的顺序,对将第二红外灯移动到各个待处理人脸轮廓的第一位置对应的第二位置,并对各个待处理人脸轮廓进行补光。
示例性的,如图11所示的待处理图像中包括多个待处理人脸轮廓,分别为人脸轮廓3、人脸轮廓4和人脸轮廓5,则根据人脸面积占图像面积的比值,与人脸距摄像头的实际距离成反比的关系,可以确定人脸轮廓3包括的人脸面积占待处理图像面积的第一比值对应的实际距离小于人脸轮廓4包括的人脸面积占待处理图像面积的第一比值对应的实际距离小于人脸轮廓5包括的人脸面积占待处理图像面积的第一比值对应的实际距离,因此,可以将第二红外灯先移动到人脸轮廓3的第一位置对应的第二位置,并对人脸轮廓3进行补光,然后将第二红外灯移动到人脸轮廓4的第一位置对应的第二位置,并对人脸轮廓4进行补光,最后将第二红外灯移动到人脸轮廓5的第一位置对应的第二位置,并对人脸轮廓5进行补光;
或者将第二红外灯先移动到人脸轮廓5的第一位置对应的第二位置,并对人脸轮廓5进行补光,然后将第二红外灯移动到人脸轮廓4的第一位置对应的第二位置,并对人脸轮廓4进行补光,最后将第二红外灯移动到人脸轮廓3的第一位置对应的第二位置,并对人脸轮廓3进行补光。
在一种可能的实施方式中,本申请实施例中将第二红外灯移动到待处理人脸轮廓的第一位置对应的第二位置,可以执行为如图12所示步骤:
在步骤1201中,基于人脸轮廓的第一位置与第二位置的预设对应关系,确定待处理人脸轮廓的第一位置对应的第二位置;
在步骤1202中,将第二红外灯移动到第二位置。
在本申请实施例中,为了减少用户操作终端设备时振动带来的位移影响,在设计第二红外灯时使得将第二红外灯在较远距离时的光斑面积大于人脸轮廓包括的面积。
在一种可能的实施方式中,本申请实施例中终端设备还包括用于移动第二红外灯的活动部件;因此本申请实施例中可以根据如图13所示的方式确定人脸轮廓的第一位置与第二位置的预设对应关系:
在步骤1301中,确定摄像头采集的第一红外灯进行补光之后的第一图像的四条边的中心像素点和第一图像的图像中心像素点的第一位置;
在步骤1302中,移动第二红外灯的活动部件,使得第二红外灯对图像中心像素点进行补光,并控制摄像头采集第二红外灯补光之后的图像,并记录活动部件当前的第一横向位置和第一纵向位置;
在步骤1303中,分别针对四条边的中心像素点:移动第二红外灯的活动部件,使得第二红外灯对中心像素点进行补光,并控制摄像头采集第二红外灯补光之后的图像,同时记录活动部件的第二横向位置和第二纵向位置;
在步骤1304中,基于第一图像的四条边的中心像素点的第一位置、第一图像的图像中心像素点的第一位置,以及活动部件的第一横向位置和第一纵向位置,以及各边的中心像素点对应的活动部件的第二横向位置和第二纵向位置,确定第一图像中各像素点的第一位置与活动部件的第二位置的对应关系;第二位置包括活动部件的横向位置和纵向位置。
具体实施时,如图14所示,为终端设备中移动第二红外灯的活动部件和第二红外灯的示意图。其中,终端设备中移动第二红外灯的活动部件可采用如图14所示的悬挂加倾角控制的步进马达机构,也可以采用具有相同功能的机械结构。其中,1和2分别是X,Y两个轴向的步进马达;3是第二红外灯的灯体;4和5是镜头组件内的镜片;6和7分别是第二红外灯的悬挂簧片,便于另外一端马达位移时带动第二红外灯以及其镜头组件构成总体结构10的发光轴调整朝向。其中马达可以使用步进电机,也可以使用带精确电流驱动控制的VCM马达。悬挂机构可以是金属弹片、弹簧、金属丝等可承受一定形变量的弹性固定材料。
其中,第二红外灯搭配镜头组件将红外光束缩小到较小补光角度范围内,增大补光距离,同时采用机械结构(含步进马达或VCM马达)可动态调整第二红外灯的红外光束方向,光束位置默认对准摄像头视野中心点。
如图15所示,为另一个角度终端设备中活动部件和第二红外灯的示意图。其中,其中,1和2分别是X,Y两个轴向的步进马达;3是第二红外灯的灯体;4和5是镜头组件内的镜片;6、7、8、9分别是第二红外灯的悬挂簧片,便于另外一端马达位移时带动第二红外灯以及其镜头组件构成总体结构10的发光轴调整朝向。其中马达可以使用步进电机,也可以使用带精确电流驱动控制的VCM马达。悬挂机构可以是金属弹片、弹簧、金属丝等可承受一定形变量的弹性固定材料。
在生产终端设备时,对第二红外灯在摄像头的成像视野中进行对位校准,分别控制X轴(马达2)调节第二红外灯的光轴从最左到最右横扫待处理图像的整个成像视野,获得第二红外灯的X轴调节范围(X+和X-);控制Y轴(马达1)调节第二红外灯的光轴从最上到最下纵扫待处理图像的整个成像视野,获得第二红外灯的Y轴调节范围(Y+和Y-),从而确定人脸轮廓的第一位置与第二位置的预设对应关系。
具体实施时,在确定人脸轮廓的第一位置与第二位置的预设对应关系时,如图16所示,为第一红外灯进行补光之后的第一图像中某一像素点的第一位置(x,y),首先计算该像素点的第一位置相对于图像中心点的像素距离(Δx,Δy),根据对应关系计算Δx/(W/2)*(X-)可得出第二位置的马达在横向位置向右移动到X;同理,根据对应关系计算Δy/(H/2)*(Y+)可得出第二位置的马达在纵向位置向上移动到Y,由此移动第二红外灯到第二位置(X-,Y+)对该像素点进行补光,并控制摄像头采集图像即可完成第二红外灯的补光拍摄过程,同时得到像素点的第一位置(x,y)对应的第二位置(X-,Y+)。其中W是第一图像横向的像素点数量,也即图像宽度;H是第一图像纵向的像素点数量,也即图像高度。
在步骤404中,基于得到的参考图像,确定待处理图像对应的目标图像。
在一种可能的实施方式中,本申请实施例中基于得到的参考图像,确定待处理图像对应的目标图像,可以执行为以下两种情况:
情况一:若待处理图像中存在一个待处理人脸轮廓,则将待处理人脸轮廓的参考图像作为待处理图像对应的目标图像;
情况二:若待处理图像中存在多个待处理人脸轮廓,则将得到的多个待处理人脸轮廓对应的多张参考图像进行合成,得到待处理图像对应的目标图像。
具体实施时,本申请实施例中基于得到的参考图像,确定待处理图像对应的目标图像,可以执行为如图17所示的步骤:
在步骤1701中,判断待处理图像中是否只存在一个待处理人脸轮廓;
若待处理图像中只存在一个待处理人脸轮廓,则在步骤1702中,获取第二红外灯对该待处理人脸轮廓补光之后的参考图像;在步骤1703中,将待处理人脸轮廓的参考图像作为待处理图像对应的目标图像;
若待处理图像中不是只存在一个待处理人脸轮廓,则在步骤1704中,获取第二红外灯对多个待处理人脸轮廓分别进行补光之后的参考图像;在步骤1705中,将得到的多个待处理人脸轮廓对应的多张参考图像进行合成,得到待处理图像对应的目标图像。
其中,若待处理图像中存在多个待处理人脸轮廓,可以自动控制第二红外灯对多个待处理人脸轮廓逐个进行补光,然后分别进行补光之后图像的采集。
为了便于理解本申请实施例提供的红外补光图像拍摄方法,下面参照图18,对本申请实施例提供的红外补光图像拍摄方法的完整流程进行说明。
在步骤1801中,响应于用户触发的针对待处理图像的采集操作,启动第一红外灯并控制摄像头采集待处理图像;
在步骤1802中,若检测到待处理图像中存在至少一个人脸轮廓,则确定至少一个人脸轮廓在待处理图像中的第一位置;
在步骤1803中,确定各人脸轮廓包括的人脸面积占待处理图像面积的第一比值;基于人脸面积占图像面积的比值,与人脸距摄像头的实际距离之间的预设对应关系,确定第一比值对应的实际距离;
在步骤1804中,若第一比值对应的实际距离大于预设距离阈值,则确定人脸轮廓为待处理人脸轮廓;
在步骤1805中,针对任意一个待处理人脸轮廓,分别执行以下操作:将第二红外灯移动到待处理人脸轮廓的第一位置对应的第二位置,并对待处理人脸轮廓进行补光,同时控制摄像头采集第二红外灯进行补光之后的参考图像;
在步骤1806中,基于得到的参考图像,确定待处理图像对应的目标图像。
基于前文的描述,本申请实施例通过在终端设备中设置一个摄像头、第一红外灯和可移动的第二红外灯;其中第一红外灯的补光角度范围大于第二红外灯的补光角度范围,且第一红外灯的补光距离小于第二红外灯的补光距离;在响应于用户触发的针对待处理图像的采集操作,启动第一红外灯并控制摄像头采集待处理图像之后,若检测到待处理图像中存在至少一个人脸轮廓,则确定至少一个人脸轮廓在待处理图像中的第一位置;针对至少一个人脸轮廓中的任意一个待处理人脸轮廓,将第二红外灯移动到待处理人脸轮廓的第一位置对应的第二位置,并对待处理人脸轮廓进行补光,同时控制摄像头采集第二红外灯进行补光之后的参考图像;其中第一位置表征人脸轮廓在待处理图像中的位置,第二位置表征第二红外灯在终端设备中的位置;基于得到的参考图像,确定待处理图像对应的目标图像。
由此,本申请中第一红外灯主要在较近补光距离内对人脸轮廓进行红外补光,而第二红外灯则将红外光聚拢在较窄的补光角度范围内以实现较远补光距离上对人脸轮廓进行红外补光;同时通过移动第二红外灯的位置,实现第二红外灯的红外光束在摄像头视野内自由移动,进而实现对摄像头画面内较远距离的人脸轮廓进行补光,有效地提高了执法记录仪等终端设备夜间清晰拍摄人脸的有效距离。
基于相同的发明构思,本申请实施例还提供一种终端设备,如图19所示,包括:摄像头1901、第一红外灯1902、第二红外灯1903、处理器1904、存储器1905和总线接口1906,其中第二红外灯1903是可移动的,其中:
其中,摄像头1901,用于红外拍摄和采集待处理图像;第一红外灯1902和所述第二红外灯1903为所述待处理图像中的人脸进行补光;其中,所述第一红外灯的补光角度范围大于所述第二红外灯的补光角度范围,且所述第一红外灯的补光距离小于所述第二红外灯的补光距离;存储器1905,用于存储所述处理器1904可执行指令;
其中,在图19中,总线接口1906可以包括任意数量的互联的总线和桥,具体由处理器1904代表的一个或多个处理器1904和存储器1905代表的存储器1905的各种电路链接在一起。总线架构还可以将诸如外围设备、稳压器和功率管理电路等之类的各种其他电路链接在一起,这些都是本领域所公知的,因此,本文不再对其进行进一步描述。总线接口1906提供接口。可选的,处理器1904可以是CPU(中央处埋器)、ASIC(Application SpecificIntegrated Circuit,专用集成电路)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)或CPLD(Complex Programmable Logic Device,复杂可编程逻辑器件),处理器也可以采用多核架构。
处理器1904通过调用存储器1905存储的计算机程序,用于按照获得的可执行指令执行本申请实施例提供的任一红外补光图像拍摄方法。处理器1904与存储器1905也可以物理上分开布置。在此需要说明的是,本发明实施例提供的上述设备,能够实现上述所有方法步骤,且能够达到相同的技术效果。
基于相同的发明构思,本申请实施例还提供一种红外补光图像拍摄装置,所述装置应用于终端设备,所述终端设备包括摄像头、第一红外灯和可移动的第二红外灯,所述第一红外灯的补光角度范围大于所述第二红外灯的补光角度范围,且所述第一红外灯的补光距离小于所述第二红外灯的补光距离,如图20所示,包括:
第一补光模块2001,用于响应于用户触发的针对待处理图像的采集操作,启动所述第一红外灯并控制所述摄像头采集待处理图像;
位置确定模块2002,用于若检测到所述待处理图像中存在至少一个人脸轮廓,则确定所述至少一个人脸轮廓在所述待处理图像中的第一位置;
第二补光模块2003,用于针对所述至少一个人脸轮廓中的任意一个待处理人脸轮廓,分别执行以下操作:将所述第二红外灯移动到所述待处理人脸轮廓的第一位置对应的第二位置,并对所述待处理人脸轮廓进行补光,同时控制所述摄像头采集所述第二红外灯进行补光之后的参考图像;其中所述第一位置表征人脸轮廓在所述待处理图像中的位置,所述第二位置表征第二红外灯在所述终端设备中的位置;
目标图像确定模块2004,用于基于得到的所述参考图像,确定所述待处理图像对应的目标图像。
在一种可能的实施方式中,所述目标图像确定模块2004,具体用于:
若所述待处理图像中存在一个所述待处理人脸轮廓,则将所述待处理人脸轮廓的参考图像作为所述待处理图像对应的目标图像;
若所述待处理图像中存在多个所述待处理人脸轮廓,则将得到的所述多个待处理人脸轮廓对应的多张参考图像进行合成,得到所述待处理图像对应的目标图像。
在一种可能的实施方式中,所述位置确定模块2002,具体用于:
利用图像分析技术提取出所述待处理图像中的特征关键点;
基于所述特征关键点和预设的面部轮廓关键点,确定所述待处理图像中的至少一个人脸轮廓;
针对每个人脸轮廓,将所述人脸轮廓的中心像素点在所述待处理图像中的位置,作为所述人脸轮廓在所述待处理图像中的第一位置。
在一种可能的实施方式中,所述第二补光模块2003,具体用于:
基于人脸轮廓的第一位置与第二位置的预设对应关系,确定所述待处理人脸轮廓的第一位置对应的第二位置;
将所述第二红外灯移动到所述第二位置。
在一种可能的实施方式中,所述终端设备还包括用于移动所述第二红外灯的活动部件;因此所述装置还包括:
对应关系确定模块,用于根据下列方式确定人脸轮廓的第一位置与第二位置的预设对应关系:
确定所述摄像头采集的所述第一红外灯进行补光之后的第一图像的四条边的中心像素点和所述第一图像的图像中心像素点的第一位置;
移动所述第二红外灯的活动部件,使得所述第二红外灯对所述图像中心像素点进行补光,并控制所述摄像头采集所述第二红外灯补光之后的图像,并记录所述活动部件当前的第一横向位置和第一纵向位置;
分别针对所述四条边的中心像素点:移动所述第二红外灯的活动部件,使得所述第二红外灯对所述中心像素点进行补光,并控制所述摄像头采集所述第二红外灯补光之后的图像,同时记录所述活动部件的第二横向位置和第二纵向位置;
基于所述第一图像的四条边的中心像素点的第一位置、所述第一图像的图像中心像素点的第一位置,以及所述活动部件的第一横向位置和第一纵向位置,以及各边的中心像素点对应的所述活动部件的第二横向位置和第二纵向位置,确定所述第一图像中各像素点的第一位置与所述活动部件的第二位置的对应关系;所述第二位置包括所述活动部件的横向位置和纵向位置。
在一种可能的实施方式中,所述第二补光模块2003,还用于:
根据下列方式确定所述至少一个人脸轮廓中的待处理人脸轮廓:
针对所述至少一个人脸轮廓中的任意一个人脸轮廓,分别执行以下操作:
确定所述人脸轮廓包括的人脸面积占所述待处理图像面积的第一比值;
基于人脸面积占图像面积的比值,与人脸距所述摄像头的实际距离之间的预设对应关系,确定所述第一比值对应的实际距离;
若所述第一比值对应的实际距离大于预设距离阈值,则确定所述人脸轮廓为所述待处理人脸轮廓。
在一种可能的实施方式中,所述第二补光模块2003,还用于:
若所述至少一个人脸轮廓中包括多个待处理人脸轮廓,则根据各待处理人脸轮廓对应的实际距离,确定将所述第二红外灯移动到所述待处理人脸轮廓的第一位置对应的第二位置,并对所述待处理人脸轮廓进行补光的顺序。
在示例性实施例中,本申请还提供了一种包括指令的计算机可读存储介质,例如包括指令的存储器,上述指令可由电子设备的处理器执行以完成上述红外补光图像拍摄方法。可选地,计算机可读存储介质可以是非临时性计算机可读存储介质,例如,非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
在示例性实施例中,还提供一种计算机程序产品,包括计算机程序,计算机程序被处理器执行时实现如本申请提供的红外补光图像拍摄方法。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。
Claims (10)
1.一种红外补光图像拍摄方法,其特征在于,所述方法应用于终端设备,所述终端设备包括摄像头、第一红外灯和可移动的第二红外灯,所述第一红外灯的补光角度范围大于所述第二红外灯的补光角度范围,且所述第一红外灯的补光距离小于所述第二红外灯的补光距离,所述方法包括:
响应于用户触发的针对待处理图像的采集操作,启动所述第一红外灯并控制所述摄像头采集待处理图像;
若检测到所述待处理图像中存在至少一个人脸轮廓,则确定所述至少一个人脸轮廓在所述待处理图像中的第一位置;
针对所述至少一个人脸轮廓中的任意一个待处理人脸轮廓,分别执行以下操作:将所述第二红外灯移动到所述待处理人脸轮廓的第一位置对应的第二位置,并对所述待处理人脸轮廓进行补光,同时控制所述摄像头采集所述第二红外灯进行补光之后的参考图像;其中所述第一位置表征人脸轮廓在所述待处理图像中的位置,所述第二位置表征第二红外灯在所述终端设备中的位置;
基于得到的所述参考图像,确定所述待处理图像对应的目标图像。
2.根据权利要求1所述的方法,其特征在于,所述基于得到的所述参考图像,确定所述待处理图像对应的目标图像,包括:
若所述待处理图像中存在一个所述待处理人脸轮廓,则将所述待处理人脸轮廓的参考图像作为所述待处理图像对应的目标图像;
若所述待处理图像中存在多个所述待处理人脸轮廓,则将得到的所述多个待处理人脸轮廓对应的多张参考图像进行合成,得到所述待处理图像对应的目标图像。
3.根据权利要求1所述的方法,其特征在于,所述若检测到所述待处理图像中存在至少一个人脸轮廓,则确定所述至少一个人脸轮廓在所述待处理图像中的第一位置,包括:
利用图像分析技术提取出所述待处理图像中的特征关键点;
基于所述特征关键点和预设的面部轮廓关键点,确定所述待处理图像中的至少一个人脸轮廓;
针对每个人脸轮廓,将所述人脸轮廓的中心像素点在所述待处理图像中的位置,作为所述人脸轮廓在所述待处理图像中的第一位置。
4.根据权利要求1所述的方法,其特征在于,所述将所述第二红外灯移动到所述待处理人脸轮廓的第一位置对应的第二位置,包括:
基于人脸轮廓的第一位置与第二位置的预设对应关系,确定所述待处理人脸轮廓的第一位置对应的第二位置;
将所述第二红外灯移动到所述第二位置。
5.根据权利要求4所述的方法,其特征在于,所述终端设备还包括用于移动所述第二红外灯的活动部件;
根据下列方式确定人脸轮廓的第一位置与第二位置的预设对应关系:
确定所述摄像头采集的所述第一红外灯进行补光之后的第一图像的四条边的中心像素点和所述第一图像的图像中心像素点的第一位置;
移动所述第二红外灯的活动部件,使得所述第二红外灯对所述图像中心像素点进行补光,并控制所述摄像头采集所述第二红外灯补光之后的图像,并记录所述活动部件当前的第一横向位置和第一纵向位置;
分别针对所述四条边的中心像素点:移动所述第二红外灯的活动部件,使得所述第二红外灯对所述中心像素点进行补光,并控制所述摄像头采集所述第二红外灯补光之后的图像,同时记录所述活动部件的第二横向位置和第二纵向位置;
基于所述第一图像的四条边的中心像素点的第一位置、所述第一图像的图像中心像素点的第一位置,以及所述活动部件的第一横向位置和第一纵向位置,以及各边的中心像素点对应的所述活动部件的第二横向位置和第二纵向位置,确定所述第一图像中各像素点的第一位置与所述活动部件的第二位置的对应关系;所述第二位置包括所述活动部件的横向位置和纵向位置。
6.根据权利要求1所述的方法,其特征在于,根据下列方式确定所述至少一个人脸轮廓中的待处理人脸轮廓:
针对所述至少一个人脸轮廓中的任意一个人脸轮廓,分别执行以下操作:
确定所述人脸轮廓包括的人脸面积占所述待处理图像面积的第一比值;
基于人脸面积占图像面积的比值,与人脸距所述摄像头的实际距离之间的预设对应关系,确定所述第一比值对应的实际距离;
若所述第一比值对应的实际距离大于预设距离阈值,则确定所述人脸轮廓为所述待处理人脸轮廓。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
若所述至少一个人脸轮廓中包括多个待处理人脸轮廓,则根据各待处理人脸轮廓对应的实际距离,确定将所述第二红外灯移动到所述待处理人脸轮廓的第一位置对应的第二位置,并对所述待处理人脸轮廓进行补光的顺序。
8.一种终端设备,其特征在于,所述终端设备包括:
摄像头、第一红外灯、可移动的第二红外灯、处理器和存储器;
所述摄像头,用于红外拍摄和采集待处理图像;
所述第一红外灯和所述可移动的第二红外灯为所述待处理图像中的人脸进行补光;其中,所述第一红外灯的补光角度范围大于所述第二红外灯的补光角度范围,且所述第一红外灯的补光距离小于所述第二红外灯的补光距离;
所述存储器,用于存储所述处理器可执行指令;
所述处理器,被配置为执行权利要求1~7任一项所述方法的步骤。
9.一种红外补光图像拍摄装置,其特征在于,所述装置应用于终端设备,所述终端设备包括摄像头、第一红外灯和可移动的第二红外灯,所述第一红外灯的补光角度范围大于所述第二红外灯的补光角度范围,且所述第一红外灯的补光距离小于所述第二红外灯的补光距离,所述装置包括:
第一补光模块,用于响应于用户触发的针对待处理图像的采集操作,启动所述第一红外灯并控制所述摄像头采集待处理图像;
位置确定模块,用于若检测到所述待处理图像中存在至少一个人脸轮廓,则确定所述至少一个人脸轮廓在所述待处理图像中的第一位置;
第二补光模块,用于针对所述至少一个人脸轮廓中的任意一个待处理人脸轮廓,分别执行以下操作:将所述第二红外灯移动到所述待处理人脸轮廓的第一位置对应的第二位置,并对所述待处理人脸轮廓进行补光,同时控制所述摄像头采集所述第二红外灯进行补光之后的参考图像;其中所述第一位置表征人脸轮廓在所述待处理图像中的位置,所述第二位置表征第二红外灯在所述终端设备中的位置;
目标图像确定模块,用于基于得到的所述参考图像,确定所述待处理图像对应的目标图像。
10.一种计算机可读存储介质,其特征在于,其包括程序代码,当所述程序代码在终端设备上运行时,所述程序代码用于使所述终端设备执行权利要求1~7任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310325304.4A CN116389894A (zh) | 2023-03-29 | 2023-03-29 | 一种红外补光图像拍摄方法、终端设备及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310325304.4A CN116389894A (zh) | 2023-03-29 | 2023-03-29 | 一种红外补光图像拍摄方法、终端设备及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116389894A true CN116389894A (zh) | 2023-07-04 |
Family
ID=86978129
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310325304.4A Pending CN116389894A (zh) | 2023-03-29 | 2023-03-29 | 一种红外补光图像拍摄方法、终端设备及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116389894A (zh) |
-
2023
- 2023-03-29 CN CN202310325304.4A patent/CN116389894A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN115473957B (zh) | 一种图像处理方法和电子设备 | |
US11949978B2 (en) | Image content removal method and related apparatus | |
CN109903260B (zh) | 图像处理方法及图像处理装置 | |
CN113709355B (zh) | 滑动变焦的拍摄方法及电子设备 | |
CN115359105B (zh) | 景深扩展图像生成方法、设备及存储介质 | |
CN116055857B (zh) | 拍照方法及电子设备 | |
KR102609734B1 (ko) | 전자 장치 및 이미지의 전송 상태에 기반하여 이미지를 보정하는 방법 | |
CN113038141B (zh) | 视频帧处理方法及电子设备 | |
CN116347217B (zh) | 图像处理方法、设备及存储介质 | |
CN112700525A (zh) | 一种图像处理方法及电子设备 | |
CN114449171B (zh) | 控制摄像头的方法、终端设备、存储介质及程序产品 | |
CN114666497B (zh) | 成像方法、终端设备及存储介质 | |
CN116723383B (zh) | 一种拍摄方法及相关设备 | |
CN116389894A (zh) | 一种红外补光图像拍摄方法、终端设备及装置 | |
CN115460343B (zh) | 图像处理方法、设备及存储介质 | |
CN116761082B (zh) | 图像处理方法及装置 | |
CN111479075B (zh) | 拍照终端及其图像处理方法 | |
CN113179362B (zh) | 电子设备及其图像显示方法 | |
CN114143456B (zh) | 拍照方法及装置 | |
CN113129238B (zh) | 拍照终端及图像校正方法 | |
CN116723382B (zh) | 一种拍摄方法及相关设备 | |
CN116723264B (zh) | 确定目标位置信息的方法、设备及存储介质 | |
CN115334239B (zh) | 前后摄像头拍照融合的方法、终端设备和存储介质 | |
CN113255644B (zh) | 显示设备及其图像识别方法 | |
US20230215018A1 (en) | Electronic device including camera and method for generating video recording of a moving object |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |