CN116170682A - 图像采集装置、方法及电子设备 - Google Patents
图像采集装置、方法及电子设备 Download PDFInfo
- Publication number
- CN116170682A CN116170682A CN202111395239.XA CN202111395239A CN116170682A CN 116170682 A CN116170682 A CN 116170682A CN 202111395239 A CN202111395239 A CN 202111395239A CN 116170682 A CN116170682 A CN 116170682A
- Authority
- CN
- China
- Prior art keywords
- image
- scene
- application processor
- scene image
- image acquisition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
Abstract
一种图像采集装置、方法及电子设备,其中,图像采集装置包括:常开摄像头,响应于图像采集操作,采集得到当前所处场景的第一场景图像;应用处理器,将第一场景图像传输至指定外部设备。将本申请提供的图像采集装置应用于电子设备时,由于第一场景图像反映了现实场景的场景内容,指定外部设备通过该第一场景图像,能够辅助用户判定出电子设备所处的现实位置,从而更好的引导用户找到电子设备,提高了电子设备被找到的概率。
Description
技术领域
本申请涉及电子技术领域,具体涉及一种图像采集装置、方法及电子设备。
背景技术
随着电子技术的不断发展,人们对手机、平板电脑等电子设备的依赖性越来越强。然而,现实生活中经常会出现这种情况,当用户需要使用电子设备时,由于忘记电子设备的放置位置,或者电子设备被遗失时,电子设备被找到的概率较低。
发明内容
本申请提供了一种图像采集装置、方法及电子设备,能够提高电子设备被找到的概率。
第一方面,本申请提供一种图像采集装置,包括:
常开摄像头,响应于图像采集操作,采集得到当前所处场景的第一场景图像;
应用处理器,将所述第一场景图像传输至指定外部设备。
第二方面,本申请提供一种图像采集方法,应用于图像采集装置,所述图像采集装置包括常开摄像头和应用处理器,该图像采集方法包括:
所述常开摄像头响应于图像采集操作,采集得到当前所处场景的第一场景图像;
所述应用处理器将所述第一场景图像传输至指定外部设备。
第三方面,本申请还提供一种电子设备,该电子设备包括本申请提供的图像采集装置。
将本申请提供的图像采集装置应用于电子设备时,使得电子设备可以通过图像采集装置的常开摄像头响应于图像采集操作,采集得到当前所处场景的第一场景图像,以及通过图像采集装置的应用处理器将第一场景图像传输至指定外部设备,由于第一场景图像反映了现实场景的场景内容,指定外部设备通过该第一场景图像,能够辅助用户判定出电子设备所处的现实位置,从而更好的引导用户找到电子设备,提高了电子设备被找到的概率。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的图像采集装置的第一结构框图。
图2是本申请实施例中生成的投屏拓扑的示例图。
图3是本申请实施例提供的图像采集装置的第二结构框图。
图4是本申请实施例提供的图像采集装置的第三结构框图。
图5是本申请实施例提供的图像采集方法的第一流程示例图。
图6是本申请实施例提供的图像采集方法的第二流程示例图。
图7是本申请实施例提供的电子设备的结构框图。
具体实施方式
应当说明的是,本申请中的术语“第一”、“第二”和“第三”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或模块的过程、方法、系统、产品或设备没有限定于已列出的步骤或模块,而是某些实施例还包括没有列出的步骤或模块,或某些实施例还包括对于这些过程、方法、产品或设备固有的其它步骤或模块。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
目前,如手机和平板电脑等电子设备给人们的生活带来了巨大的便利,人们也越来越离不开电子设备,但是也经常会遇到遗失电子设备或者忘记电子设备放置位置的情况。当用户需要查找电子设备时,一般通过以下两种方式来查找电子设备:
(1)人力搜寻,即用户凭借记忆尝试在可能放置电子设备的位置查找电子设备,这种查找电子设备的方式最直接但效率最低,一般用于初步尝试。
(2)通过其它电子设备呼叫要查找的电子设备,通过响铃或者电子设备震动的声音来源来判断电子设备的放置位置。这种方式只有在电子设备已开启铃声或者震动,且在电子设备的声音传播范围内才能够实现。
可以看出,以上两种查找电子设备的方式都严重依赖人力,使得电子设备被找到的效率和概率都不高。为此,本申请提供一种图像采集装置、图像采集方法及电子设备。
请参照图1,图1为本申请实施例提供的图像采集装置100的结构框图,如图1所示,该图像采集装置100可以包括常开摄像头110和应用处理器120。
其中,常开(Always On,AON)摄像头110被配置为采集图像,至少包括镜头和图像传感器,镜头用于将外界的光信号投射至图像传感器,图像传感器用于将镜头投射的光信号进行光电转换,将光信号转换为可用的电信号,得到数字化的图像。应当说明的是,区别于普通的摄像头,常开摄像头110能在数据帧间进入等待状态,因而可以用较低的功耗实现图像采集,达到常开的目的。
本实施例中,常开摄像头110可以响应于图像采集操作,对当前所处场景进行图像采集,从而采集得到当前所处场景的图像,记为第一场景图像。其中,当前所处场景可以理解为常开摄像头110所对准的现实场景,即常开摄像头110当前能够将光信号转换为对应图像的场景。此处对于图像采集操作的来源不作具体限制,该图像采集操作可以来源于图像采集装置100的内部(如应用处理器120),也可以来源于图像采集装置100的外部(如指定外部设备)。
应用处理器120可以为通用的处理器,比如ARM架构的处理器,X86架构的处理器等。本实施例中,应用处理器120可以将常开摄像头110采集得到的第一场景图像传输至指定外部设备。此处对于指定外部设备的类型不作具体限制,可由本领域技术人员根据实际需要进行配置,比如,指定外部设备可以为设置在云端的服务器。
将本申请提供的图像采集装置100应用于电子设备时,比如,请参照图2,可以将图像采集装置100应用于手机等电子设备,使得电子设备可以通过图像采集装置100的常开摄像头110响应于图像采集操作,采集得到当前所处场景的第一场景图像,以及通过图像采集装置100的应用处理器120将第一场景图像传输至服务器指定外部设备。以此,由于第一场景图像反映了现实场景的场景内容,指定外部设备通过该第一场景图像,能够辅助用户判定出电子设备所处的现实位置,从而更好的引导用户找到电子设备,提高了电子设备被找到的概率。
可选地,在一实施例中,图像采集操作由应用处理器120从指定外部设备处接收;
或者,图像采集操作由应用处理器120在到达预设采集周期时触发;
或者,图像采集操作由应用处理器120在处于运动状态时触发;
或者,图像采集操作由应用处理器120在接收到输入的预设操作时触发。
本实施例中,图像采集操作可以来源于图像采集装置100内部,也可以来自与图像采集装置100外部。
作为一可选地实施方式,应用处理器120从指定外部设备处接收图像采集操作。
比如,指定外部设备提供有图像采集界面,该图像采集界面提供有用于输入图像采集操作的图像采集控件,当用户需要查找电子设备时,可以通过另一电子设备登录到该图像采集界面,并通过该图像采集界面所提供的图像采集控件向指定外部设备输入图像采集操作,相应的,指定外部设备在接收到输入的图像采集操作之后,将该图像采集操作传输至图像采集装置110的应用处理器120。
作为一可选地实施方式,应用处理器120在到达预设采集周期时触发图像采集操作。其中,预设采集周期可由本领域技术人员预先缺省设置,也可由用户预先根据实际需要设置。
比如,可以配置预设采集周期为每个自然日的15:00,相应的,应用处理器120在每个自然日的15:00时将自动触发图像采集操作。
作为一可选地实施方式,应用处理器120在处于运动状态时触发图像采集操作。
比如,图像采集装置100配置有运动传感器时,应用处理器120可以获取运动传感器采集的传感器数据,并根据该传感器数据识别当前是否处于运动状态,是则触发图像采集操作。
又比如,常开摄像头110具备运动检测功能,常开摄像头110可以通过比较采集的图像差异来识别是否处于运动状态,是则指示应用处理器120当前处于运动状态,相应的,应用处理器120触发图像采集操作。需要说明的是,常开摄像头110在采集图像进行运动状态的检测期间,并不将采集图像的传输至应用处理器120,其仅在响应于图像采集操作之后,才会将采集的图像传输至应用处理器120。
作为一可选地实施方式,应用处理器120在接收到输入的预设操作时触发图像采集操作。
示例性的,在将图像采集装置100应用于电子设备时,预设操作可由本领域技术员人员根据实际需要进行配置,比如,可以配置预设操作为针对电子设备中隐私信息的查看操作,针对的电子设备的关机操作,和/或针对电子设备的解锁操作等。相应的,应用处理器120若接收到输入的预设操作,则触发图像采集操作。
可选地,在一实施例中,请参照图3,图像采集装置100还包括:
图像处理芯片130,若图像采集操作来自于指定外部设备且用于指示采集人脸图像,则对第一场景图像进行人脸检测;
应用处理器120在第一场景图像中存在人脸时,将第一场景图像传输至指定外部设备。
应当说明的是,在图像采集操作来自于指定外部设备且用于指示采集人脸图像时,图像采集操作还可以携带指示信息,用于指示图像采集装置100采集包括指定类型物体的图像返回至指定外部设备。
本实施例中,在图像采集操作来自于指定外部设备且用于指示采集人脸图像,也即指示采集包括人脸的图像时,常开摄像头110将采集的第一场景图像传输至图像处理芯片130,由图像处理芯片130进一步对第一场景图像进行人脸检测,也即检测第一场景图像中是否存在人脸。此处对图像处理芯片130进行人脸检测的方式不作具体限制,比如,图像处理芯片130可以采用模板匹配的方式进行人脸检测等。
在完成对第一场景图像的人脸检测之后,若图像处理芯片130检测到第一场景图像中存在人脸,则将第一场景图像传输至应用处理器120,由应用处理器120将该第一场景图像传输至指定外部设备。
示例性的,图像处理芯片130可以包括图像处理单元和神经网络处理单元,图像处理芯片130在接收到来自于常开摄像头110的第一场景图像之后,由图像处理单元对第一场景图像进行基本的优化处理,包括但不限于黑电平补偿、镜头校正、坏像素校正、白平衡、色彩校正以及伽马校正等;在图像处理单元完成对第一场景图像的优化处理之后,神经网络处理单元通过已训练的人脸检测模型对第一场景图像进行人脸检测,得到人脸检测结果。其中,若在第一场景图像中检测到人脸,则图像处理芯片130将第一场景图像传输至应用处理器120,由应用处理器120将第一场景图像传输至指定外部设备;若未在第一场景图像中检测到人脸,则图像处理芯片130指示常开摄像头110重新采集第一场景图像,以采集到包括人脸的第一场景图像,若在接收到图像采集操作的第一预设时长后仍未采集到存在人脸的第一场景图像,则图像处理芯片130发送用于指示采集人脸图像失败的采集失败指示信息至应用处理器120。应用处理器120在接收到来自于图像处理芯片130的采集失败指示信息时,指示常开摄像头110停止采集第一场景图像,以及返回用于指示不存在人脸的指示信息至指定外部设备。
在其他实施例中,来自于指定外部设备的图像采集操作还可以用于指示采集场景图像,与以上指示采集人脸图像的图像采集操作的区别在于,图像处理芯片130并不对来自于常开摄像头110的第一场景图像进行人脸检测,而是在通过图像处理芯片对第一场景图像进行优化处理之后,直接将第一场景图像传输至应用处理器120,由应用处理器120将该第一场景图像传输至指定外部设备。
可选地,在一实施例中,常开摄像头110对第一场景图像进行人形检测,确定第一场景图像的人形区域;
图像处理芯片130按照人形区域,通过人脸检测模型对第一场景图像进行人脸检测。
本实施例中,常开摄像头110具备人形检测能力,此处对于常开摄像头110如何进行人形检测不作具体限制,比如,常开摄像头110可以通过模板匹配的方式进行人形检测。
其中,常开摄像头110在采集到当前所处场景的第一场景图像之后,并不直接将该第一场景图像传输至图像处理芯片130,而是先对第一场景图像进行人形检测,确定出第一场景图像中的人形区域,然后,将第一场景图像以及用于指示第一场景图像中人形区域的区域指示信息传输至图像处理芯片130。
相应的,图像处理芯片130在接收到来自于常开摄像头110的第一场景图像以及区域指示信息之后,进一步按照区域指示信息指示的人形区域,由神经网络处理单元通过已训练的人脸检测模型对第一场景图像进行人脸检测,得到人脸检测结果。
其中,神经网络处理单元可以根据区域指示信息的指示,从第一场景图像中裁剪出人形区域的图像内容,并将裁剪出的人像区域的图像内容输入到已训练的人脸检测模型中进行人脸检测,相应得到第一场景图像的人脸检测结果。
以此,通过按照人形区域进行针对性的人脸检测,能够提高人脸检测的效率。
在其他实施例中,若对第一场景图像的人形检测失败,也即未从第一场景图像中检测出人形区域时,常开摄像头110重新采集第一场景图像,以采集到包括人形区域的第一场景图像,若在在接收到图像采集操作的第二预设时长后仍未采集到存在人形区域的第一场景图像,则常开摄像头110直接将最后一次采集得到的第一场景图像传输至图像处理芯片130进行人脸检测。
其中,以第二预设时长短于第一预设时长为约束,可由本领域技术人员根据实际需要进行取值。
可选地,在一实施例中,若图像采集操作由应用处理器120在处于运动状态时触发,图像处理芯片130对第一场景图像进行人脸识别;
应用处理器120在第一场景图像中存在非预设人脸时,将第一场景图像传输至指定外部设备。
本实施例中,当图像采集装置110应用于电子设备时,预设人脸可以理解为具备电子设备操作权限的用户人脸,比如机主的人脸,或者机主授权使用电子设备的其他用户的人脸。预设人脸将被加载到图像处理芯片130的神经网络处理单元中,用于人脸识别。
相应的,若图像采集操作由应用处理器120在处于运动状态时触发,说明此时电子设备可能被握持使用,图像处理芯片130对第一场景图像进行人脸识别,也即是由神经网络处理单元识别第一场景图像中是否存在与预设人脸不匹配的人脸。当识别到第一场景图像中存在与预设人脸不匹配的人脸,也即是第一场景图像中存在非预设人脸时,图像处理芯片130将该存在非预设人脸的第一场景图像传输至应用处理器120,由应用处理器120将第一场景图像传输至指定外部设备。
可选地,在一实施例中,应用处理器120对第一场景图像进行压缩,得到第三压缩图像,以及将压缩得到的第三压缩图像传输至指定外部设备。
为降低对数据传输带宽的占用,应用处理器120对第一场景图像进行压缩后再传输。
示例性的,本实施例中,常开摄像头110采集的第一场景图像为RAW格式的图像,RAW格式的第一场景图像输入到图像处理芯片130进行优化处理后,以YUV格式输出,当该YUV格式的第一场景图像满足传输要求(具体可参照以上实施例中的相关描述,此处不再赘述)时,应用处理器120对YUV格式的第一场景图像进行压缩,将其压缩为占用存储空间更小的格式后再传输,比如,应用处理器120可以将第一场景图像由YUV格式压缩为JPEG格式或者Webp格式后再传输至指定外部设备。
可选地,请参照图4,在一实施例中,图像采集装置100还包括第一广角摄像头140,第一广角摄像头140的视角范围大于常开摄像头110的视角范围,第一广角摄像头140在第一场景图像中存在非预设人脸时,采集得到当前所处场景的第二场景图像;
图像处理芯片130确定第二场景图像中的显著性区域,并对显著性区域进行物体识别,得到物体信息;
应用处理器120获取当前的第一位置信息,并根据第一位置信息和物体信息对第一场景图像进行压缩,得到第一压缩图像;以及将第一压缩图像传输至指定外部设备。
本实施例中,图像采集装置100还包括第一广角摄像头140,用于采集更丰富内容的图像,从而提供更丰富的信息。比如,当图像采集装置100应用于手机时,常开摄像头110可以被配置为手机的前置摄像头,第一广角摄像头140可以被配置为手机的后置摄像头。
其中,应用处理器120在接收到图像处理芯片130传输的存在非预设人脸的第一场景图像时,指示第一广角摄像头140拍摄,相应的,第一广角摄像头140将根据应用处理器120的指示,对当前所处场景进行图像采集,并将采集得到的图像记为第二场景图像。
如上,第一广角摄像头140在采集得到第二场景图像之后,将该第二场景图像传输至图像处理芯片130。
图像处理芯片130在接收到来自于第一广角摄像头110的第二场景图像之后,由图像处理单元对第二场景图像进行基本的优化处理,包括但不限于黑电平补偿、镜头校正、坏像素校正、白平衡、色彩校正以及伽马校正等;在图像处理单元完成对第二场景图像的优化处理之后,神经网络处理单元通过已训练的显著区域识别模型对第二场景图像进行显著性识别,确定第二场景图像中的显著性区域,通俗的说,显著性区域即更可能被用户注意到的区域。此处对于显著性区域识别模型的架构以及训练方式不作具体限制,可由本领域技术人员根据实际需要进行配置。
在确定出第二场景图像中的显著性区域之后,图像处理芯片130进一步对第二场景图像的显著性区域进行物体识别,识别得到的物体信息将反映第二场景图像中容易被用户注意到的物体,换言之,也即是容易帮助判定出电子设备当前所处场景的物体。
其中,图像处理芯片130可以采用预设物体识别技术对前述第二场景图像中的显著性区域进行物体识别,得到物体信息,物体信息可以包括物体的种类、颜色,或者其它能够描述物体特征的信息。此处对于采用何种物体识别技术用作对第二场景图像进行物体识别的预设物体识别技术不作具体限制,可由本领域技术人员根据实际需要进行选择。比如,图像处理芯片130可以由神经网络处理单元通过预训练的图像语义分割模型对第二场景图像的显著性区域进行识别,从而第二场景图像的显著性区域中,存在的物体的物体信息。
本实施例中,在图像采集装置100应用于电子设备时,应用处理器120还可以从电子设备配置的定位单元(包括但不限于卫星定位单元和基站定位单元等)处获取到当前的位置信息,记为第一位置信息。之后,应用处理器120根据第一位置信息和前述物体信息对第一场景图像进行压缩,并将压缩得到的第一压缩图像传输至指定外部设备,该第一压缩图像既包括了第一场景图像的原始图像内容,又包括了前述第一位置信息和前述物体信息。
可以理解的是,当用户需要寻找电子设备时,根据该第一压缩图像包括的原始图像内容、描述其所处位置的第一位置信息、以及显著区域的物体信息,能够帮助用户更准确地确定电子设备的位置,从而更快的寻找到电子设备。
比如,以图像采集装置应用的电子设备为手机为例,在手机丢失,路人拾取并使用时,常开摄像头110作为前置摄像头拍摄到的图像画面大部分被人像占去,而第一广角摄像头作为后置摄像头则可以拍摄到手机背面的场景,比如大型路标、商铺店名等显著物体,在这种情况下,同步记录下手机当前的位置信息,能够帮助用户更快的寻找到手机。
可选地,在一实施例中,应用处理器120在图像采集操作由应用处理器120在到达预设采集周期时触发,或者由应用处理器120在处于运动状态时触发,或者由应用处理器120在接收到输入的预设操作时触发时,获取当前的第二位置信息;以及根据第二位置信息对第一场景图像进行压缩,得到第二压缩图像;以及将第二压缩图像传输至指定外部设备。
本实施例中,将图像采集装置100应用电子设备时,可以为电子设备提供活动记录功能。比如,以电子设备为手机为例,有时候用户并未及时意识到手机已经丢失,贻误了查找手机的时机。这时候,本实施例提供的活动记录功能则能为用户提供帮助。
其中,在图像采集操作由应用处理器120在到达预设采集周期时触发,或者由应用处理器120在处于运动状态时触发,或者由应用处理器120在接收到输入的预设操作时触发时,也即是图像采集操作来自与图像采集装置100内部时,应用处理器120从电子设备配置的定位单元(包括但不限于卫星定位单元和基站定位单元等)处获取到当前的位置信息,记为第二位置信息。之后,应用处理器120根据第二位置信息对第一场景图像进行压缩,并将压缩得到的第二压缩图像传输至指定外部设备,该第二压缩图像既包括了第一场景图像的原始图像内容,又包括了前述第二位置信息。
可以理解的是,当用户需要寻找电子设备时,根据该第二压缩图像包括的原始图像内容、描述其所处位置的第二位置信息,能够帮助用户更准确地确定电子设备的位置,从而更快的寻找到电子设备。
通过以上活动记录功能,能够帮助用户获取电子设备的当前状态信息,并进行恰当的处理。以手机为例通过查看手机使用人照片,用户可以确认手机是否安全。如果手机正在被不信任的人使用,用户则可以采用远程锁定手机或者删除手机数据的方法来防止手机上的重要信息被泄露;如果手机当前用户是机主信任的朋友亲人,则不必要对手机进行清除数据这种保护过度的操作,避免损失。
可选地,在一实施例中,图像采集装置100还包括第二广角摄像头,第二广角摄像头的视角范围大于常开摄像头110的视角范围,应用处理器120对第一场景图像的场景复杂程度进行评估,得到第一场景图像的复杂度;
第二广角摄像头在第一场景图像的复杂度小于复杂度阈值时,采集得到当前所处场景的第三场景图像;
应用处理器120将第一场景图像替换为第二场景图像。
为了确保最终向用户提供具备足够线索的图像,本实施例中在第一场景图像的原始图像内容较为单一时,对其进行替换。
其中,常开摄像头110在采集得到第一场景图像之后,并不直接将该第一场景图像传输至图像处理芯片130进行后续的处理,而是先由应用处理器120按照配置的复杂度评估策略对第一场景图像的场景复杂程度进行评估,得到第一场景图像的复杂度,此处对于复杂度评估策略的配置不作具体限制,可由本领域技术人员根据实际需要进行配置。
若第一场景图像的复杂度小于复杂度阈值小于复杂度阈值(可由本领域技术人员根据实际需要取值),则应用处理器120指示第二广角摄像头采集图像。相应的,第二广角摄像头根据应用处理器120的指示,在第一场景图像的复杂度小于复杂度阈值时,对当前所处场景进行图像采集,将采集得到的图像记为第三场景图像,并将第一场景图像替换为第三场景图像,也即是架构第三场景图像作为第一场景图像传输至图像处理芯片130进行后续的处理,具体可参照以上实施例中的相关描述,此处不再赘述。
比如,当图像采集装置100应用于手机时,常开摄像头110被配置为手机的前置摄像头,第二广角摄像头被配置为手机的后置摄像头,若手机面向桌面放置,常开摄像头110拍摄的第一场景图像将是一张漆黑的图像,此时,由手机背面的第二广角摄像头进行拍摄,将拍摄得到具有正常图像内容的第三场景图像。
应当说明的是,以上实施例中,应用处理器120在获取到待传输至指定外部设备的待传输图像(如上第一压缩图像、第二压缩图像等)后,并不直接将该待传输图像传输至指定外部设备,而是先将该待传输图像保存在电子设备本地,比如,电子设备为手机时,可以将待传输图像保存在手机的本地专用相册中,在手机网络状况良好且电量充足的情况下把待传输图像传输至指定外部设备,并在传输成功后,删除本地的待传输图像。
将本申请提供的以上图像采集装置100应用手机,且将指定外部设备配置为云端服务器时,具有以下优点:
(1)能够辅助用户更快地确认手机具体位置,利用采集的第一场景图像,能辅助用户进行详细位置判断。这对于手机丢失在家里或办公室这种用户比较熟悉的环境时,帮助很大。
(2)能帮助用户获取手机当前状态信息,并进行恰当的处理。通过查看包括人脸的第一场景图像,用户可以确认手机是否安全。如果手机正在被不信任的人使用,用户则可以采用远程锁定手机或者删除手机数据的方法来防止手机上的重要信息被泄露;如果手机当前用户是机主信任的朋友亲人,则不必要对手机进行清除数据这种保护过度的操作,避免损失。
(3)利用活动记录功能,能在用户没有及时意识到手机丢失,无法远程连接到手机的情况下,通过查看手机的历史上传的第二压缩图像,了解手机的运动轨迹和处境。这些信息能为用户提供更多的线索,提高查找手机的可能性。
本申请还提供一种图像采集方法,应用于本申请提供的图像采集装置,该图像采集装置包括常开摄像头和应用处理器,请参照图5,该图像采集方法的流程可以如下:
在S210中,常开摄像头响应于图像采集操作,采集得到当前所处场景的第一场景图像;
在S220中,应用处理器将第一场景图像传输至指定外部设备。
可选地,在一实施例中,图像采集操作由应用处理器从指定外部设备处接收;
或者,图像采集操作由应用处理器在到达预设采集周期时触发;
或者,图像采集操作由应用处理器在处于运动状态时触发;
或者,图像采集操作由应用处理器在接收到输入的预设操作时触发。
可选地,在一实施例中,图像采集装置还包括图像处理芯片,应用处理器将第一场景图像传输至指定外部设备之前,还包括:
若图像采集操作来自于指定外部设备且用于指示采集人脸图像,则图像处理芯片对第一场景图像进行人脸检测;
应用处理器将第一场景图像传输至指定外部设备,包括:
在第一场景图像中存在人脸时,应用处理器将第一场景图像传输至指定外部设备。
可选地,在一实施例中,图像处理芯片对第一场景图像进行人脸检测之前,还包括:
常开摄像头对第一场景图像进行人形检测,确定第一场景图像的人形区域;
图像处理芯片对第一场景图像进行人脸检测,包括:
图像处理芯片按照人形区域,通过人脸检测模型对第一场景图像进行人脸检测。
可选地,在一实施例中,应用处理器将第一场景图像传输至指定外部设备之前,还包括
若图像采集操作由应用处理器在处于运动状态时触发,图像处理芯片对第一场景图像进行人脸识别;
应用处理器将第一场景图像传输至指定外部设备,包括:
在第一场景图像中存在非预设人脸时,应用处理器将第一场景图像传输至指定外部设备。
可选地,在一实施例中,图像采集装置还包括第一广角摄像头,第一广角摄像头的视角范围大于常开摄像头的视角范围,应用处理器将第一场景图像传输至指定外部设备之前,还包括:
第一广角摄像头在第一场景图像中存在非预设人脸时,采集得到第二场景图像;
图像处理芯片确定第二场景图像中的显著性区域,并对显著性区域进行物体识别,得到物体信息;
应用处理器将第一场景图像传输至指定外部设备,包括:
应用处理器获取当前的第一位置信息,并根据第一位置信息和物体信息对第一场景图像进行压缩,得到第一压缩图像;以及将第一压缩图像传输至指定外部设备。
可选地,在一实施例中,应用处理器将第一场景图像传输至指定外部设备,包括:
应用处理器在图像采集操作由应用处理器在到达预设采集周期时触发,或者由应用处理器在处于运动状态时触发,或者由应用处理器在接收到输入的预设操作时触发时,获取当前的第二位置信息;以及根据第二位置信息对第一场景图像进行压缩,得到第二压缩图像;以及将第二压缩图像传输至指定外部设备。
可选地,在一实施例中,图像采集装置还包括第二广角摄像头,第二广角摄像头的视角范围大于常开摄像头的视角范围,应用处理器将第一场景图像传输至指定外部设备之前,还包括:
应用处理器对第一场景图像的场景复杂程度进行评估,得到第一场景图像的复杂度;
第二广角摄像头在第一场景图像的复杂度小于复杂度阈值时,采集得到当前所处场景的第三场景图像,并将第一场景图像替换为第三场景图像。
需要说明的是,以上图像采集方法的具体实现请参照以上图像采集装置实施例中的相关描述,此处不再赘述。
本申请还提供一种电子设备,该电子设备包括本申请任一实施例提供的图像采集装置。
本申请还提供一种图像采集方法,应用于电子设备,该电子设备包括常开摄像头,请参照图6,该图像采集方法的流程可以如下:
在S310中,响应于图像采集操作,通过常开摄像头采集得到当前所处场景的第一场景图像;
在S320中,将第一场景图像传输至指定外部设备。
可选地,在一实施例中,图像采集操作从指定外部设备处接收;
或者,图像采集操作在当前到达预设采集周期时触发;
或者,图像采集操作在当前处于运动状态时触发;
或者,图像采集操作由在当前接收到输入的预设操作时触发。
可选地,在一实施例中,电子设备还包括图像处理芯片,将第一场景图像传输至指定外部设备之前,还包括:
若图像采集操作来自于指定外部设备且用于指示采集人脸图像,则通过图像处理芯片对第一场景图像进行人脸检测;
将第一场景图像传输至指定外部设备,包括:
在第一场景图像中存在人脸时,将第一场景图像传输至指定外部设备。
可选地,在一实施例中,在通过图像处理芯片对第一场景图像进行人脸检测之前,还包括:
通过常开摄像头对第一场景图像进行人形检测,确定第一场景图像的人形区域;
通过图像处理芯片对第一场景图像进行人脸检测,包括:
按照人形区域,通过图像处理芯片调用人脸检测模型对第一场景图像进行人脸检测。
可选地,在一实施例中,将第一场景图像传输至指定外部设备之前,还包括:
若图像采集操作在当前处于运动状态时触发,通过图像处理芯片对第一场景图像进行人脸识别;
将第一场景图像传输至指定外部设备,包括:
在第一场景图像中存在非预设人脸时,将第一场景图像传输至指定外部设备。
可选地,在一实施例中,电子设备还包括第一广角摄像头,第一广角摄像头的视角范围大于常开摄像头的视角范围,将第一场景图像传输至指定外部设备之前,还包括:
在第一场景图像中存在非预设人脸时,通过第一广角摄像头采集得到当前所处场景的第二场景图像;
通过图像处理芯片确定第二场景图像中的显著性区域,并对显著性区域进行物体识别,得到物体信息;
将第一场景图像传输至指定外部设备,包括:
获取当前的第一位置信息,并根据第一位置信息和物体信息对第一场景图像进行压缩,得到第一压缩图像;以及将第一压缩图像传输至指定外部设备。
可选地,在一实施例中,将第一场景图像传输至指定外部设备,包括:
在图像采集操作在当前到达预设采集周期时触发,或者在当前处于运动状态时触发,或者在当前接收到输入的预设操作时触发时,获取当前的第二位置信息;以及根据第二位置信息对第一场景图像进行压缩,得到第二压缩图像;以及将第二压缩图像传输至指定外部设备。
可选地,在一实施例中,电子设备还包括第二广角摄像头,第二广角摄像头的视角范围大于常开摄像头的视角范围,将第一场景图像传输至指定外部设备之前,还包括:
对第一场景图像的场景复杂程度进行评估,得到第一场景图像的复杂度;
在第一场景图像的复杂度小于复杂度阈值时,通过第二广角摄像头采集得到当前所处场景的第三场景图像,并将第一场景图像替换为第三场景图像。
需要说明的是,以上图像采集方法的具体实现请参照以上图像采集装置实施例中的相关描述,此处不再赘述。
本申请还提供一种电子设备,请参照图7,该电子设备400包括应用处理器410、常开摄像头420和存储器430。
其中,应用处理器410可以是通用处理器,比如ARM架构的处理器,X86架构的处理器等。
常开摄像头420至少包括镜头和图像传感器,镜头用于将外界的光信号投射至图像传感器,图像传感器用于将镜头投射的光信号进行光电转换,将光信号转换为可用的电信号,得到数字化的图像。应当说明的是,区别于普通的摄像头,常开摄像头420能在数据帧间进入等待状态,因而可以用较低的功耗实现图像采集,达到常开的目的。
存储器430中存储有计算机程序,其可以为高速随机存取存储器,还可以为非易失性存储器,比如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件等。相应地,存储器430还可以包括存储器控制器,以提供应用处理器410对存储器430的访问。应用处理器410通过执行存储器430中的计算机程序,用于执行图像采集方法,比如:
响应于图像采集操作,通过常开摄像头420采集得到当前所处场景的第一场景图像;
将第一场景图像传输至指定外部设备。
可选地,在一实施例中,图像采集操作从指定外部设备处接收;
或者,图像采集操作在当前到达预设采集周期时触发;
或者,图像采集操作在当前处于运动状态时触发;
或者,图像采集操作由在当前接收到输入的预设操作时触发。
可选地,在一实施例中,电子设备还包括图像处理芯片,将第一场景图像传输至指定外部设备之前,应用处理器410还用于执行:
若图像采集操作来自于指定外部设备且用于指示采集人脸图像,则通过图像处理芯片对第一场景图像进行人脸检测;
将第一场景图像传输至指定外部设备时,应用处理器410用于执行:
在第一场景图像中存在人脸时,将第一场景图像传输至指定外部设备。
可选地,在一实施例中,在通过图像处理芯片对第一场景图像进行人脸检测之前,应用处理器410还用于执行:
通过常开摄像头420对第一场景图像进行人形检测,确定第一场景图像的人形区域;
通过图像处理芯片对第一场景图像进行人脸检测时,应用处理器410用于执行:
按照人形区域,通过图像处理芯片调用人脸检测模型对第一场景图像进行人脸检测。
可选地,在一实施例中,将第一场景图像传输至指定外部设备之前,应用处理器410还用于执行:
若图像采集操作在当前处于运动状态时触发,通过图像处理芯片对第一场景图像进行人脸识别;
将第一场景图像传输至指定外部设备时,应用处理器410用于执行:
在第一场景图像中存在非预设人脸时,将第一场景图像传输至指定外部设备。
可选地,在一实施例中,电子设备还包括第一广角摄像头,第一广角摄像头的视角范围大于常开摄像头420的视角范围,将第一场景图像传输至指定外部设备之前,应用处理器410还用于执行:
在第一场景图像中存在非预设人脸时,通过第一广角摄像头采集得到当前所处场景的第二场景图像;
通过图像处理芯片确定第二场景图像中的显著性区域,并对显著性区域进行物体识别,得到物体信息;
将第一场景图像传输至指定外部设备时,应用处理器410用于执行:
获取当前的第一位置信息,并根据第一位置信息和物体信息对第一场景图像进行压缩,得到第一压缩图像;以及将第一压缩图像传输至指定外部设备。
可选地,在一实施例中,将第一场景图像传输至指定外部设备时,应用处理器410用于执行:
在图像采集操作在当前到达预设采集周期时触发,或者在当前处于运动状态时触发,或者在当前接收到输入的预设操作时触发时,获取当前的第二位置信息;以及根据第二位置信息对第一场景图像进行压缩,得到第二压缩图像;以及将第二压缩图像传输至指定外部设备。
可选地,在一实施例中,电子设备还包括第二广角摄像头,第二广角摄像头的视角范围大于常开摄像头420的视角范围,将第一场景图像传输至指定外部设备之前,应用处理器410还用于执行:
对第一场景图像的场景复杂程度进行评估,得到第一场景图像的复杂度;
在第一场景图像的复杂度小于复杂度阈值时,通过第二广角摄像头采集得到当前所处场景的第三场景图像,并将第一场景图像替换为第三场景图像。
需要说明的是,以上计算机程序在应用处理器410以后台进程的形式运行,包括两个线程1和线程2两个线程。线程1与指定外部设备进行交互,接收来自指定外部设备的图像采集操作,并将响应于图像采集操作而采集到的图像传回给指定外部设备。线程2用于记录电子设备的活动信息,自动触发进行图像采集,并将采集的图像附加电子设备的位置信息上传至指定外部设备。
此外,以上电子设备的具体实现请参照以上图像采集装置实施例中的相关描述,此处不再赘述。
本申请还提供一种存储介质,其上存储有计算机程序,当其存储的计算机程序在本申请实施例提供的电子设备的处理器上执行时,使得电子设备的处理器执行以上任一图像采集方法中的步骤。其中,存储介质可以是磁碟、光盘、只读存储器(Read Only Memory,ROM)或者随机存取器(Random Access Memory,RAM)等。
以上对本申请所提供的图像采集装置、方法及电子设备进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。
Claims (10)
1.一种图像采集装置,其特征在于,包括:
常开摄像头,响应于图像采集操作,采集得到当前所处场景的第一场景图像;
应用处理器,将所述第一场景图像传输至指定外部设备。
2.根据权利要求1所述的图像采集装置,其特征在于,所述图像采集操作由所述应用处理器从所述指定外部设备处接收;
或者,所述图像采集操作由所述应用处理器在到达预设采集周期时触发;
或者,所述图像采集操作由所述应用处理器在处于运动状态时触发;
或者,所述图像采集操作由所述应用处理器在接收到输入的预设操作时触发。
3.根据权利要求2所述的图像采集装置,其特征在于,还包括:
图像处理芯片,若所述图像采集操作来自于所述指定外部设备且用于指示采集人脸图像,则对所述第一场景图像进行人脸检测;
所述应用处理器在所述第一场景图像中存在人脸时,将所述第一场景图像传输至所述指定外部设备。
4.根据权利要求3所述的图像采集装置,其特征在于,所述常开摄像头对所述第一场景图像进行人形检测,确定所述第一场景图像的人形区域;
所述图像处理芯片按照所述人形区域,通过人脸检测模型对所述第一场景图像进行人脸检测。
5.根据权利要求3所述的图像采集装置,其特征在于,若所述图像采集操作由所述应用处理器在处于运动状态时触发,所述图像处理芯片对所述第一场景图像进行人脸识别;
所述应用处理器在所述第一场景图像中存在非预设人脸时,将所述第一场景图像传输至指定外部设备。
6.根据权利要求5所述的图像采集装置,其特征在于,还包括第一广角摄像头,所述第一广角摄像头的视角范围大于所述常开摄像头的视角范围,所述第一广角摄像头在所述第一场景图像中存在非预设人脸时,采集得到第二场景图像;
所述图像处理芯片确定所述第二场景图像中的显著性区域,并对所述显著性区域进行物体识别,得到物体信息;
所述应用处理器获取当前的第一位置信息,并根据所述第一位置信息和所述物体信息对所述第一场景图像进行压缩,得到第一压缩图像;以及将所述第一压缩图像传输至所述指定外部设备。
7.根据权利要求2所述的图像采集装置,其特征在于,所述应用处理器在所述图像采集操作由所述应用处理器在到达预设采集周期时触发,或者由所述应用处理器在处于运动状态时触发,或者由所述应用处理器在接收到输入的预设操作时触发时,获取当前的第二位置信息;以及根据所述第二位置信息对所述第一场景图像进行压缩,得到第二压缩图像;以及将所述第二压缩图像传输至所述指定外部设备。
8.根据权利要求1所述的图像采集装置,其特征在于,还包括第二广角摄像头,所述第二广角摄像头的视角范围大于所述常开摄像头的视角范围,所述应用处理器对所述第一场景图像的场景复杂程度进行评估,得到所述第一场景图像的复杂度;
所述第二广角摄像头在所述第一场景图像的复杂度小于复杂度阈值时,采集得到当前所处场景的第三场景图像,并将所述第一场景图像替换为所述第三场景图像。
9.一种图像采集方法,其特征在于,应用于图像采集装置,所述图像采集装置包括常开摄像头和应用处理器,所述图像采集方法包括:
所述常开摄像头响应于图像采集操作,采集得到当前所处场景的第一场景图像;
所述应用处理器将所述第一场景图像传输至指定外部设备。
10.一种电子设备,其特征在于,包括如权利要求1-8任一项所述的图像采集装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111395239.XA CN116170682A (zh) | 2021-11-23 | 2021-11-23 | 图像采集装置、方法及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111395239.XA CN116170682A (zh) | 2021-11-23 | 2021-11-23 | 图像采集装置、方法及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116170682A true CN116170682A (zh) | 2023-05-26 |
Family
ID=86411795
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111395239.XA Pending CN116170682A (zh) | 2021-11-23 | 2021-11-23 | 图像采集装置、方法及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116170682A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117676331A (zh) * | 2024-02-01 | 2024-03-08 | 荣耀终端有限公司 | 自动对焦方法及电子设备 |
-
2021
- 2021-11-23 CN CN202111395239.XA patent/CN116170682A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117676331A (zh) * | 2024-02-01 | 2024-03-08 | 荣耀终端有限公司 | 自动对焦方法及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6134825B2 (ja) | コンテクストデータを使用して端末によって画像キャプチャの確率を自動的に決定する方法 | |
WO2019137167A1 (zh) | 相册管理方法、装置、存储介质及电子设备 | |
US20100272364A1 (en) | Image editing system and method | |
CN103327270B (zh) | 一种图像处理方法、装置和终端 | |
CN109325518B (zh) | 图像的分类方法、装置、电子设备和计算机可读存储介质 | |
EP4036759A1 (en) | Pose determination method, apparatus and system | |
CN109413760B (zh) | 一种无线连接方法及设备 | |
US20140204237A1 (en) | User terminal and image processing method for recognizing user in user terminal | |
US20220272255A1 (en) | Surveillance video streams with embedded object data | |
CN111836052B (zh) | 图像压缩方法、装置、电子设备及存储介质 | |
CN111564157A (zh) | 会议记录优化方法、装置、设备及存储介质 | |
JP5153478B2 (ja) | 画像処理装置及び画像処理方法 | |
KR102054930B1 (ko) | 영상 공유 방법 및 이를 위한 장치 | |
CN110072057B (zh) | 图像处理方法及相关产品 | |
CN116170682A (zh) | 图像采集装置、方法及电子设备 | |
CN110519503A (zh) | 一种扫描图像的获取方法及移动终端 | |
CN102780842B (zh) | 手持式电子装置以及适用于其的双重影像撷取方法 | |
CN110677580A (zh) | 拍摄方法、装置、存储介质及终端 | |
CN105513101A (zh) | 图片处理方法及装置 | |
CN109561286A (zh) | 适用于定点监控的摄像机 | |
CN103269419B (zh) | 视频记录系统 | |
JP2012533922A (ja) | 映像処理方法及び装置 | |
CN107018318B (zh) | 低功耗无线相机及传感器系统 | |
CN114241620B (zh) | 一种数据采集方法、装置、电子设备及存储介质 | |
CN113873200B (zh) | 一种图像标识方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |