CN114095643A - 一种多主体融合成像的方法、装置、存储介质及电子设备 - Google Patents
一种多主体融合成像的方法、装置、存储介质及电子设备 Download PDFInfo
- Publication number
- CN114095643A CN114095643A CN202010775183.XA CN202010775183A CN114095643A CN 114095643 A CN114095643 A CN 114095643A CN 202010775183 A CN202010775183 A CN 202010775183A CN 114095643 A CN114095643 A CN 114095643A
- Authority
- CN
- China
- Prior art keywords
- image
- main body
- images
- camera
- screen
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 47
- 230000004927 fusion Effects 0.000 title claims abstract description 31
- 238000003860 storage Methods 0.000 title claims abstract description 12
- 238000000034 method Methods 0.000 claims abstract description 26
- 238000004590 computer program Methods 0.000 claims description 17
- 238000004422 calculation algorithm Methods 0.000 claims description 4
- 230000000694 effects Effects 0.000 abstract description 9
- 238000010586 diagram Methods 0.000 description 10
- 230000009467 reduction Effects 0.000 description 7
- 230000006870 function Effects 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 238000005457 optimization Methods 0.000 description 4
- 230000002146 bilateral effect Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000009432 framing Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 230000016776 visual perception Effects 0.000 description 2
- 238000003708 edge detection Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 210000001503 joint Anatomy 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
- H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
Abstract
本发明公开了一种多主体融合成像的方法、装置、存储介质及电子设备,其中方法包括以下步骤:获取预览图像;解析所述预览图像,得到所述预览图像中的至少两个图像主体;获取各所述图像主体在屏幕上的位置;根据各所述图像主体在所述屏幕上的位置,选取与所述图像主体的位置对应的至少一个摄像头;控制所选取的各所述摄像头拍摄对应的所述图像主体,获得至少两张主体图像;将各所述主体图像融合,得到融合图像。本发明通过解析预览图像,获得多个图像主体,再调用各图像主体位置预设范围内的多摄像头分别进行拍摄,再将多张主体图像进行融合,避免了一幅图中部分主体还原度失真及成像模糊,提升了图中各个主体的成像质量,获得了更好的成像效果。
Description
技术领域
本发明涉及摄像的图像处理技术领域,尤其涉及一种多主体融合成像的方法、装置、存储介质及电子设备。
背景技术
移动终端在对景物进行取景的时候,受到摄像头视场角大小以及摄像头个数的限制,通常都只能选择一个曝光主体进行取景和最佳曝光。但是一幅图像当中有时会有若干个主体,非曝光主体就会出现还原度失真或者模糊等情况。
故需要提升图像中各个主体的图像质量,让一幅图中的各个主体都能呈现出最佳的成像效果。
发明内容
本发明提供了一种多主体融合成像的方法,解决一幅图中部分主体还原度失真及成像模糊的技术问题,提升了一幅图中各个主体的成像质量,获得更好的成像效果。
本发明提供了一种多主体融合成像的方法,包括以下步骤:
获取预览图像;
解析所述预览图像,得到所述预览图像中的至少两个图像主体;
获取各所述图像主体在屏幕上的位置;
根据各所述图像主体在所述屏幕上的位置,选取与所述图像主体的位置对应的至少一个摄像头;
控制所选取的各所述摄像头拍摄对应的所述图像主体,获得至少两张主体图像;
将各所述主体图像融合,得到融合图像。
在本发明的实施例中,
所述获取预览图像的步骤包括:
获取当前图像,并获取所述当前图像的图像参数;
获取所述当前图像之前的至少一帧的前帧图像,获取各所述前帧图像的图像参数;
检测各所述前帧图像的图像参数与所述当前图像的图像参数之间的差值是否大于预设参数阈值;
当各所述前帧图像的图像参数与所述当前图像的图像参数之间的差值小于或等于所述预设参数阈值时,获取所述预览图像。
在本发明的实施例中,
所述解析所述预览图像,得到所述预览图像中的至少两个图像主体的步骤包括:
解析所述预览图像,采用边缘识别算法获得出所述预览图像中的至少两个图像主体的轮廓信息;
根据各所述图像主体的轮廓信息,得到所述预览图像中的各所述图像主体。
在本发明的实施例中,
所述根据各所述图像主体在所述屏幕上的位置,选取与所述图像主体的位置对应的至少一个摄像头的步骤包括:
根据各所述图像主体在所述屏幕上的位置,检测各所述图像主体在所述屏幕上的位置的预设范围内是否存在对应的摄像头;
当所述图像主体在所述屏幕上的位置的预设范围内存在至少一个对应的摄像头,则选取与所述图像主体的位置对应的至少一个摄像头;
当所述图像主体在所述屏幕上的位置的预设范围内不存在对应的摄像头,则选取与所述图像主体在所述屏幕上的位置距离最近的摄像头。
在本发明的实施例中,
所述控制所选取的各所述摄像头拍摄对应的所述图像主体,获得至少两张主体图像的步骤包括:
控制所选取的各所述摄像头对对应的所述图像主体进行对焦及曝光,基于对所述图像主体的对焦及曝光拍摄所述图像主体,获得至少两张所述主体图像。
在本发明的实施例中,
所述将各所述主体图像融合,得到融合图像的步骤包括:
提取各所述主体图像的图像特征;
对各所述主体图像建立同一坐标系;
在所述坐标系上对各所述主体图像的图像特征进行匹配,基于匹配的所述主体图像的图像特征对各所述主体图像再进行匹配;
将匹配后的各所述主体图像进行融合,得到所述融合图像。
在本发明的实施例中,
所述获得至少两张主体图像,其中,将选取数量最多的所述摄像头拍摄的所述主体图像设置为主图像,其他张所述主体图像设置为子图像;
所述将各所述主体图像融合,得到融合图像的步骤还包括:
将所述主图像和各所述子图像进行融合,得到所述融合图像。
本发明还提供了一种多主体融合成像的装置,包括:
预览图像模块,用于获取预览图像;
识别图像主体模块,用于解析所述预览图像,得到所述预览图像中的至少两个图像主体;
图像主体位置模块,用于获取各所述图像主体在屏幕上的位置;
调用摄像头模块,用于根据各所述图像主体在所述屏幕上的位置,选取与所述图像主体的位置对应的至少一个摄像头;
主体成像模块,用于控制所选取的各所述摄像头拍摄对应的所述图像主体,获得至少两张主体图像;
主体图像融合模块,用于将各所述主体图像融合,得到融合图像。
在本发明的实施例中,
所述摄像头包括屏下摄像头,所述屏下摄像头均匀分布于屏幕下方各个区域。
本发明还提供了一种存储介质,其上存储有计算机程序,该程序被处理器执行时实现以上内容中任一项所述多主体融合成像方法的步骤。
本发明还提供了一种电子设备,包括:
存储器,其上存储有计算机程序;以及
处理器,用于执行所述存储器中的所述计算机程序,以实现以上中任一项所述多主体融合成像方法的步骤。
与现有技术相比,本发明的一个或多个实施例可以具有如下优点:
本发明提供了一种多主体融合成像的方法,通过解析预览图像,获得多个图像主体,再调用各图像主体位置预设范围内的多摄像头分别进行拍摄,再将多张主体图像进行融合,避免了一幅图中部分主体还原度失真及成像模糊,提升了图中各个主体的成像质量,获得了更好的成像效果。
本发明的其它特征和优点将在随后的说明书中阐述,并且部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例共同用于解释本发明,并不构成对本发明的限制。在附图中:
图1是本发明一实施例的多主体融合成像方法流程示意图;
图2是本发明一实施例的提升主体成像质量方法的流程示意图;
图3是本发明一实施例的多主体融合成像系统框架示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,以下结合附图对本发明作进一步地详细说明,借此对本发明如何应用技术手段来解决技术问题,并达成技术效果的实现过程能充分理解并据以实施。需要说明的是,只要不构成冲突,本发明中的各个实施例以及各实施例中的各个特征可以相互结合,所形成的技术方案均在本发明的保护范围之内。
第一实施例
图1是本实施例的多主体融合成像方法流程示意图;
图2是本实施例的提升主体成像质量方法的流程示意图;
本实施例提供了一种多主体融合成像的方法,包括以下步骤:
获取预览图像;
解析预览图像,得到预览图像中的至少两个图像主体;
获取各图像主体在屏幕上的位置;
根据各图像主体在屏幕上的位置,选取与图像主体的位置对应的至少一个摄像头;
控制所选取的各摄像头拍摄对应的图像主体,获得至少两张主体图像;
将各主体图像融合,得到融合图像。
本实施例提供的一种多主体融合成像的方法,具体包括以下步骤:
步骤S110,获取预览图像。
具体地,移动终端收到用户的摄像指令后,各摄像头开启,开始加载初始参数,并获取预览图像。
在本实施例中,获取预览图像的步骤包括:
首先,获取当前图像,并获取当前图像的图像参数;
各摄像头启动后移动终端自动进入预览模式中,获取当前图像,接着根据移动终端摄像模组的自动曝光控制模块、自动聚焦控制模块及自动白平衡控制模块的统计参数数据,获取当前图像的各项图像参数,其中,图像参数包括陀螺仪数据值和亮度数据值。
其次,获取当前图像之前的至少一帧的前帧图像,获取各前帧图像的图像参数;
获得当前图像的各项图像参数后,接着再获取当前图像之前的至少一帧的前帧图像,同时也获取这些前帧图像的各项图像参数。在本实施例中,优选获得最少10帧的前帧图像。
然后,检测各前帧图像的图像参数与当前图像的图像参数之间的差值是否大于预设参数阈值;
计算每一张前帧图像的各图像参数与当前图像的各图像参数之间的差值,然后检测图像参数之间的差值是否大于预设的各图像参数阈值。优选地,本实例中,计算前帧图像和当前图像的陀螺仪值与亮度值之间的差值,然后检测陀螺仪值的差值以及亮度值的差值是否分别大于预设的陀螺仪阈值及亮度阈值。
最后,当各前帧图像的图像参数与当前图像的图像参数之间的差值小于或等于预设参数阈值时,获取预览图像。
如果各前帧图像的各图像参数与当前图像的各图像参数之间的差值小于或等于预设参数阈值时,则获取预览图像。优选地,在本实施例中,当有10帧前帧图像与当前图像的陀螺仪值和亮度值差值均小于或等于预设的陀螺仪阈值及亮度阈值,说明目前摄像模组获得的当前图像已经是稳定状态,则获取预览图像。
进一步的,还能比较当前第一图像与前一帧图像的图像参数的差值是否小于或等于预设参数阈值,再获取另一张当前第二图像,则当前第一图像变成了前帧图像,然后再比较当前第二图像与已变成前帧图像的当前第一图像的图像参数的差值是否小于或等于预设参数阈值,直到满足连续10张当前图像与前一帧图像的图像参数的差值小于或等于预设参数阈值,说明目前摄像模组获得的当前图像已经是稳定状态,则获取预览图像。
步骤S120,解析预览图像,得到预览图像中的至少两个图像主体。
获得预览图像后,需要对预览图像进行解析识别处理,以便区分预览图像中多个不同的图像主体。
在本实施例中,解析预览图像,得到预览图像中的至少两个图像主体的步骤包括:
首先,解析预览图像,采用边缘识别算法获得出预览图像中的至少两个图像主体的轮廓信息;
本实施例中,通过边缘识别算法来获得各图像主体的轮廓信息。
具体地,由于图像主体的边缘是每个图像主体的基本特征,故通过识别各图像主体的边缘来识别图像中的各个图像主体。在本实施例中的边缘检测方法包括:
对原始的预览图像进行平滑处理得到平滑图像;
对平滑图像进行锐化处理得到锐化图像;
对锐化图像进行边缘判定处理、二值化处理及边缘连接处理,则获得包含各图像主体边缘的图像。
然后,根据各图像主体的轮廓信息,得到预览图像中的各图像主体。
得到各图像主体的轮廓信息后,则能获得预览图像中的各图像主体并通过边缘轮廓进行区分,给每个轮廓内的图像主体按编码规则分别设置一个唯一的ID编号,以便调用和区分各图像主体。
步骤S130,获取各图像主体在屏幕上的位置。
得到各图像主体的轮廓信息并区分各图像主体后,再根据各图像主体在屏幕上占据的区域获得各图像主体在屏幕上的位置,便于后续步骤执行。
步骤S140,根据各图像主体在屏幕上的位置,选取与图像主体的位置对应的至少一个摄像头。
明确各图像主体在屏幕上的位置后,再选择给各图像主体取景的摄像头组合,多摄像头组合更有利于从多角度对各图像主体进行曝光。
在本实施例中,根据各图像主体在屏幕上的位置,选取与图像主体的位置对应的至少一个摄像头的步骤包括:
首先,根据各图像主体在屏幕上的位置,检测各图像主体在屏幕上的位置的预设范围内是否存在对应的摄像头;
确定各图像主体在屏幕上的位置后,根据各图像主体在屏幕上位置的预设范围,检测在各图像主体的预设范围内是否设置有摄像头。
其次,当图像主体在屏幕上的位置的预设范围内存在至少一个对应的摄像头,则选取与图像主体的位置对应的至少一个摄像头;
根据在各图像主体的预设范围内是否设置有摄像头的检测结果,如果图像主体在屏幕上的位置的预设范围内设置有一个摄像头,或设置有多个摄像头,则把与图像主体的位置对应的这一个摄像头或多个摄像头均选取为此图像主体对应的摄像头组合,用于给此图像主体进行拍摄。
然后,当图像主体在屏幕上的位置的预设范围内不存在对应的摄像头,则选取与图像主体在屏幕上的位置距离最近的摄像头。
根据在各图像主体的预设范围内是否设置有摄像头的检测结果,如果图像主体在屏幕上的位置的预设范围内没有设置摄像头,则把距图像主体在屏幕上的位置最近的一个摄像头均选取为此图像主体对应的摄像头组合,用于给此图像主体进行拍摄。
进一步的,在一实施例中,摄像头包括屏下摄像头,且屏下摄像头均匀分布于屏幕下方各个区域。这样更有利于每个图像主体根据在屏幕中的位置选取对应的摄像头组合。
步骤S150,控制所选取的各摄像头拍摄对应的图像主体,获得至少两张主体图像。
给各图像主体选取对应的摄像头组合后,控制每个图像主体对应的摄像头组合进行拍摄,这样可获得多个图像主体的主体图像。
在本实施例中,控制所选取的各摄像头拍摄对应的图像主体,获得至少两张主体图像的步骤包括:
控制所选取的各摄像头对对应的图像主体进行对焦及曝光,基于对图像主体的对焦及曝光拍摄图像主体,获得至少两张主体图像。
具体地,控制选取的摄像头组合对对应的各图像主体分别进行对焦、曝光及色彩优化操作,基于对图像主体的对焦、曝光及色彩优化拍摄图像主体,从而获得多张主体图像。
对各图像主体进行曝光成像,需提前预设曝光时间与曝光增益的权重比,并基于曝光时间和曝光增益的权重比来计算各主体图像中的亮度值;其中,曝光时间与曝光增益的权重比最低设置为0.9,最高设置为1.0。
将各主体图像的亮度值与基于当前环境照度预设的目标亮度值进行比较,并对预设曝光时间与曝光增益的权重比更新进行迭代计算,直到各主体图像的亮度值与预设的目标亮度值之间的差值小于或等于指定容差值,从而得到各主体图像的曝光时间与曝光增益权重比的最佳组合,进而各主体图像得到最适合的曝光,提升了主体图像的图像质量。
色彩优化,则是对当前环境的色温进行概率统计计算,计算出当前环境的色温值。根据不同色温对白平衡的还原比例系数,对主体图像中不同颜色通道的像素值调整不同的色彩比例系数,达到视觉感知度更好的色彩效果,提升了主体图像的图像质量。采用色彩饱和度和对白平衡的还原程度值来衡量主体图像的色彩质量。
进一步的,在获得至少两张主体图像中,还能将选取数量最多的摄像头拍摄的主体图像设置为主图像,其他张主体图像设置为子图像,便于为主图像中的图像主体进行更多的优化。
步骤S160,将各主体图像融合,得到融合图像。
每张主体图像都得到了最适合的曝光、达到了视觉感觉度更好的色彩效果,再把多张主体图像进行像素级别的融合,最终得到一张包含每个图像主体的质量更好的融合图像。
具体地,在本实施例中,将各主体图像融合,得到融合图像的步骤包括:
首先,提取各主体图像的图像特征;
对每张主体图像的特征点进行提取,组成了各主体图像的特征点集。
其次,对各主体图像建立同一坐标系;
建议一个坐标系,将每张主体图像都转化到这个坐标系中。
然后,在坐标系上对各主体图像的图像特征进行匹配,基于匹配的主体图像的图像特征对各主体图像再进行配准;
在同一个坐标系中,将各主体图像的特征点集中的图像特征先进行相互匹配,然后基于匹配好的主体图像的图像特征对各主体图像再进行配准,各主体图像中相同位置的像素点都能得到进一步的配准,使得匹配点解更为精确,图像匹配的质量更好。
最后,将匹配后的各主体图像进行融合,得到融合图像。
基于配准后的各主体图像,把配准后的各主体图像全部复制到一张配准图的图像中,得到配准图像。
配准图像有时能发现多图的融合并不自然,原因就在于配准图像的交界处,各图交界处包括光照色泽不一致、部分主体纹路对接不平滑的原因使得各图交界处的过渡图像质量不高,所以需要特定的处理解决这种不自然。
在本实施例中,对配准图图像中的各重叠边界采用双边滤波器处理各图像主体的边缘,双边滤波器基于空间距离和灰度距离的高斯函数相乘的方式来处理重叠部分,使得在重叠部分由一幅主体图像慢慢过渡到另一幅主体图像,即将图像的重叠区域的像素值按一定的权值相加合成新的图像,直到配准图图像的信息熵达到最大值,得到融合图像。
对于数字图像,图像是由一些像素点组成,不同亮度的像素点在空间占据不同的区域,使得图像表现出不同的形状,不同形状的图像所包含的信息量是不同的,一副全黑或全白的图像,可以看成是必然事件,所包含的信息为零,具有确定性。当图像各层亮度的像素出现的概率相等时,图像形状的不确定性最大,此时图像所包含的信息量最大,具有极限性,故用信息熵来描述图像形状。信息熵是衡量图像信息的丰富程度的一个重要指标。如果图像的信息熵越大,则表明图像的信息量越多。
进一步的,将各主体图像融合,得到融合图像的步骤还包括:
将步骤S150中一实施例的主图像和各子图像进行融合,得到融合图像。
综上所述,本实施例提供了一种多主体融合成像的方法,通过解析预览图像,获得多个图像主体,再调用各图像主体位置预设范围内的多摄像头分别进行拍摄,再将多张主体图像进行融合,避免了一幅图中部分主体还原度失真及成像模糊,提升了图中各个主体的成像质量,获得了更好的成像效果。
第二实施例
图3是本实施例的多主体融合成像系统框架示意图。
本实施例还提供了一种多主体融合成像的装置,包括:
预览图像模块,用于获取预览图像;
识别图像主体模块,用于解析预览图像,得到预览图像中的至少两个图像主体;
图像主体位置模块,用于获取各图像主体在屏幕上的位置;
调用摄像头模块,用于根据各图像主体在屏幕上的位置,选取与图像主体的位置对应的至少一个摄像头;
主体成像模块,用于控制所选取的各摄像头拍摄对应的图像主体,获得至少两张主体图像;
主体图像融合模块,用于将各主体图像融合,得到融合图像。
在本发明的实施例中,
摄像头包括屏下摄像头,屏下摄像头均匀分布于屏幕下方各个区域。
综上所述,本实施例提供了一种多主体融合成像的系统,通过各个模块的协助,进行解析预览图像,获得多个图像主体,再调用各图像主体位置预设范围内的多摄像头分别进行拍摄,再将多张主体图像进行融合,避免了一幅图中部分主体还原度失真及成像模糊,提升了图中各个主体的成像质量,获得了更好的成像效果。
第三实施例
本实施例还提供了一种存储介质,其上存储有计算机程序,该程序被处理器执行时实现以上内容中任一项多主体融合成像方法的步骤。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或综合软件和硬件方面的实施例的形势。而且,本发明可采用再一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
第四实施例
本实施例还提供了一种电子设备,包括:
存储器,其上存储有计算机程序;以及
处理器,用于执行存储器中的计算机程序,以实现以上中任一项多主体融合成像方法的步骤。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现再流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储再能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得再计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而再计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
虽然本发明公开的实施方式如上,但所述的内容只是为了便于理解本发明而采用的实施方式,并非用以限定本发明。任何本发明所述技术领域内的技术人员,在不脱离本发明所公开的精神和范围的前提下,可以在实施的形式上及细节上作任何的修改与变化,本发明的保护范围并不局限于文中公开的特定实施例,而是包括落入权利要求范围内的所有技术方案。
Claims (11)
1.一种多主体融合成像的方法,其特征在于,包括以下步骤:
获取预览图像;
解析所述预览图像,得到所述预览图像中的至少两个图像主体;
获取各所述图像主体在屏幕上的位置;
根据各所述图像主体在所述屏幕上的位置,选取与所述图像主体的位置对应的至少一个摄像头;
控制所选取的各所述摄像头拍摄对应的所述图像主体,获得至少两张主体图像;
将各所述主体图像融合,得到融合图像。
2.根据权利要求1所述的方法,其特征在于,所述获取预览图像的步骤包括:
获取当前图像,并获取所述当前图像的图像参数;
获取所述当前图像之前的至少一帧的前帧图像,获取各所述前帧图像的图像参数;
检测各所述前帧图像的图像参数与所述当前图像的图像参数之间的差值是否大于预设参数阈值;
当各所述前帧图像的图像参数与所述当前图像的图像参数之间的差值小于或等于所述预设参数阈值时,获取所述预览图像。
3.根据权利要求1所述的方法,其特征在于,所述解析所述预览图像,得到所述预览图像中的至少两个图像主体的步骤包括:
解析所述预览图像,采用边缘识别算法获得出所述预览图像中的至少两个图像主体的轮廓信息;
根据各所述图像主体的轮廓信息,得到所述预览图像中的各所述图像主体。
4.根据权利要求1所述的方法,其特征在于,所述根据各所述图像主体在所述屏幕上的位置,选取与所述图像主体的位置对应的至少一个摄像头的步骤包括:
根据各所述图像主体在所述屏幕上的位置,检测各所述图像主体在所述屏幕上的位置的预设范围内是否存在对应的摄像头;
当所述图像主体在所述屏幕上的位置的预设范围内存在至少一个对应的摄像头,则选取与所述图像主体的位置对应的至少一个摄像头;
当所述图像主体在所述屏幕上的位置的预设范围内不存在对应的摄像头,则选取与所述图像主体在所述屏幕上的位置距离最近的摄像头。
5.根据权利要求1所述的方法,其特征在于,所述控制所选取的各所述摄像头拍摄对应的所述图像主体,获得至少两张主体图像的步骤包括:
控制所选取的各所述摄像头对对应的所述图像主体进行对焦及曝光,基于对所述图像主体的对焦及曝光拍摄所述图像主体,获得至少两张所述主体图像。
6.根据权利要求5所述的方法,其特征在于,所述将各所述主体图像融合,得到融合图像的步骤包括:
提取各所述主体图像的图像特征;
对各所述主体图像建立同一坐标系;
在所述坐标系上对各所述主体图像的图像特征进行匹配,基于匹配的所述主体图像的图像特征对各所述主体图像再进行匹配;
将匹配后的各所述主体图像进行融合,得到所述融合图像。
7.根据权利要求6所述的方法,其特征在于,所述获得至少两张主体图像,其中,将选取数量最多的所述摄像头拍摄的所述主体图像设置为主图像,其他张所述主体图像设置为子图像;
所述将各所述主体图像融合,得到融合图像的步骤还包括:
将所述主图像和各所述子图像进行融合,得到所述融合图像。
8.一种多主体融合成像的装置,其特征在于,包括:
预览图像模块,用于获取预览图像;
识别图像主体模块,用于解析所述预览图像,得到所述预览图像中的至少两个图像主体;
图像主体位置模块,用于获取各所述图像主体在屏幕上的位置;
调用摄像头模块,用于根据各所述图像主体在所述屏幕上的位置,选取与所述图像主体的位置对应的至少一个摄像头;
主体成像模块,用于控制所选取的各所述摄像头拍摄对应的所述图像主体,获得至少两张主体图像;
主体图像融合模块,用于将各所述主体图像融合,得到融合图像。
9.根据权利要求8所述的装置,其特征在于,
所述摄像头包括屏下摄像头,所述屏下摄像头均匀分布于屏幕下方各个区域。
10.一种存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1至7中任一项所述多主体融合成像方法的步骤。
11.一种电子设备,其特征在于,包括:
存储器,其上存储有计算机程序;以及
处理器,用于执行所述存储器中的所述计算机程序,以实现权利要求1至7中任一项所述多主体融合成像方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010775183.XA CN114095643B (zh) | 2020-08-03 | 2020-08-03 | 一种多主体融合成像的方法、装置、存储介质及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010775183.XA CN114095643B (zh) | 2020-08-03 | 2020-08-03 | 一种多主体融合成像的方法、装置、存储介质及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114095643A true CN114095643A (zh) | 2022-02-25 |
CN114095643B CN114095643B (zh) | 2022-11-11 |
Family
ID=80295153
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010775183.XA Active CN114095643B (zh) | 2020-08-03 | 2020-08-03 | 一种多主体融合成像的方法、装置、存储介质及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114095643B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024167572A1 (en) * | 2023-02-07 | 2024-08-15 | Arriver Software Ab | Dynamic time of capture |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6278489B1 (en) * | 1994-06-17 | 2001-08-21 | Canon Kabushiki Kaisha | Image pickup apparatus for changing a position of a detection area |
CN103327244A (zh) * | 2013-06-05 | 2013-09-25 | 广东欧珀移动通信有限公司 | 一种基于角速度检测的摄像对焦方法及装置 |
WO2018018995A1 (zh) * | 2016-07-29 | 2018-02-01 | 广东欧珀移动通信有限公司 | 图像色彩处理方法、装置及终端设备 |
CN110139033A (zh) * | 2019-05-13 | 2019-08-16 | Oppo广东移动通信有限公司 | 拍照控制方法及相关产品 |
CN110602358A (zh) * | 2019-08-28 | 2019-12-20 | 维沃移动通信有限公司 | 一种图像采集方法及电子设备 |
CN110691193A (zh) * | 2019-09-03 | 2020-01-14 | RealMe重庆移动通信有限公司 | 摄像头切换方法、装置、存储介质及电子设备 |
-
2020
- 2020-08-03 CN CN202010775183.XA patent/CN114095643B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6278489B1 (en) * | 1994-06-17 | 2001-08-21 | Canon Kabushiki Kaisha | Image pickup apparatus for changing a position of a detection area |
CN103327244A (zh) * | 2013-06-05 | 2013-09-25 | 广东欧珀移动通信有限公司 | 一种基于角速度检测的摄像对焦方法及装置 |
WO2018018995A1 (zh) * | 2016-07-29 | 2018-02-01 | 广东欧珀移动通信有限公司 | 图像色彩处理方法、装置及终端设备 |
CN110139033A (zh) * | 2019-05-13 | 2019-08-16 | Oppo广东移动通信有限公司 | 拍照控制方法及相关产品 |
CN110602358A (zh) * | 2019-08-28 | 2019-12-20 | 维沃移动通信有限公司 | 一种图像采集方法及电子设备 |
CN110691193A (zh) * | 2019-09-03 | 2020-01-14 | RealMe重庆移动通信有限公司 | 摄像头切换方法、装置、存储介质及电子设备 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024167572A1 (en) * | 2023-02-07 | 2024-08-15 | Arriver Software Ab | Dynamic time of capture |
Also Published As
Publication number | Publication date |
---|---|
CN114095643B (zh) | 2022-11-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111986129B (zh) | 基于多摄图像融合的hdr图像生成方法、设备及存储介质 | |
CN110572573B (zh) | 对焦方法和装置、电子设备、计算机可读存储介质 | |
CN113766125B (zh) | 对焦方法和装置、电子设备、计算机可读存储介质 | |
CN107358593B (zh) | 成像方法和装置 | |
CN111915505B (zh) | 图像处理方法、装置、电子设备及存储介质 | |
CN109089047A (zh) | 控制对焦的方法和装置、存储介质、电子设备 | |
US20090040364A1 (en) | Adaptive Exposure Control | |
CN103426147B (zh) | 图像处理装置、图像拾取装置和图像处理方法 | |
CN107749944A (zh) | 一种拍摄方法及装置 | |
CN110191287B (zh) | 对焦方法和装置、电子设备、计算机可读存储介质 | |
CN113888437A (zh) | 图像处理方法、装置、电子设备及计算机可读存储介质 | |
CN108156369B (zh) | 图像处理方法和装置 | |
CN110443766B (zh) | 图像处理方法、装置、电子设备及可读存储介质 | |
CN109559353B (zh) | 摄像模组标定方法、装置、电子设备及计算机可读存储介质 | |
CN110796041A (zh) | 主体识别方法和装置、电子设备、计算机可读存储介质 | |
CN113674303B (zh) | 图像处理方法、装置、电子设备及存储介质 | |
CN113313626A (zh) | 图像处理方法、装置、电子设备及存储介质 | |
CN115278103B (zh) | 一种基于环境感知的安防监控图像补偿处理方法及系统 | |
CN114677394A (zh) | 抠图方法、装置、摄像设备、会议系统、电子设备及介质 | |
CN114095643B (zh) | 一种多主体融合成像的方法、装置、存储介质及电子设备 | |
CN113673474B (zh) | 图像处理方法、装置、电子设备及计算机可读存储介质 | |
CN112581481B (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN110992283A (zh) | 图像处理方法、图像处理装置、电子设备和可读存储介质 | |
CN116456191A (zh) | 图像生成方法、装置、设备及计算机可读存储介质 | |
CN114979504B (zh) | 相机拍摄参数确定方法、装置及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |