CN106803920B - 一种图像处理的方法、装置及智能会议终端 - Google Patents

一种图像处理的方法、装置及智能会议终端 Download PDF

Info

Publication number
CN106803920B
CN106803920B CN201710160930.7A CN201710160930A CN106803920B CN 106803920 B CN106803920 B CN 106803920B CN 201710160930 A CN201710160930 A CN 201710160930A CN 106803920 B CN106803920 B CN 106803920B
Authority
CN
China
Prior art keywords
image
determining
depth
current
image frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710160930.7A
Other languages
English (en)
Other versions
CN106803920A (zh
Inventor
运如靖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Shiyuan Electronics Thecnology Co Ltd
Guangzhou Shirui Electronics Co Ltd
Original Assignee
Guangzhou Shiyuan Electronics Thecnology Co Ltd
Guangzhou Shirui Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Shiyuan Electronics Thecnology Co Ltd, Guangzhou Shirui Electronics Co Ltd filed Critical Guangzhou Shiyuan Electronics Thecnology Co Ltd
Priority to CN201710160930.7A priority Critical patent/CN106803920B/zh
Publication of CN106803920A publication Critical patent/CN106803920A/zh
Priority to PCT/CN2017/103282 priority patent/WO2018166170A1/zh
Application granted granted Critical
Publication of CN106803920B publication Critical patent/CN106803920B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

本发明实施例公开了一种图像处理的方法、装置及智能会议终端。该方法包括:获取通过摄像头捕获的当前实景图像帧,并确定所述当前实景图像帧中的目标聚焦图像;根据所述目标聚焦图像确定所述当前实景图像帧的景深远界限值;对所述景深远界限值对应的图像区域进行图像参数信息的调节处理。利用该方法,能够对视频通话时所捕获图像帧中的局部图像进行调节处理,高效的实现了待处理目标区域的确定以及处理,更好地增加了图像处理的灵活性,有效提升了视频参与者在智能终端上的显示效果。

Description

一种图像处理的方法、装置及智能会议终端
技术领域
本发明涉及图像处理技术领域,尤其涉及一种图像处理的方法、装置及智能会议终端。
背景技术
目前,智能终端中通常具有视频通话功能,在智能终端与其他智能终端建立连接后,可以基于其具有的视频通话功能进行视频通话。
一般地,在视频通话时,智能终端通过摄像头对目标对象进行实时捕获形成图像帧,并连续的将捕获的图像帧发送给其它智能终端设备。对于大型的具有视频通话功能的智能终端而言,如智能会议平板,终端自身往往是固定不动的,且一般设置在与窗户相对的位置,基于该智能终端进行视频通话时,参与视频的用户往往处于背光状态,此时,智能终端设备上的摄像头所捕获的图像帧中无法清晰显示用户的图像信息,且用户所处位置越靠近窗户,图像帧中所显示的用户图像信息就越不清晰,由此在向其他智能终端设备发送该图像帧之前,需要对该图像帧中的图像信息进行处理。
现有技术中对图像信息进行处理时往往是对整体图像的处理,其处理方式存在局限性。
发明内容
本发明实施例提供了一种图像处理的方法、装置及智能会议终端,增加了图像处理的灵活性,进而达到了视频通话时清晰显示所捕获图像帧中目标对象的目的。
一方面,本发明实施例提供了一种图像处理的方法,包括:
获取通过摄像头捕获的当前实景图像帧,并确定所述当前实景图像帧中的目标聚焦图像;
根据所述目标聚焦图像确定所述当前实景图像帧的景深远界限值;
对所述景深远界限值对应的图像区域进行图像参数信息的调节处理。
另一方面,本发明实施例提供了一种图像处理的装置,包括:
实景图像获取模块,用于获取通过摄像头捕获的当前实景图像帧;
聚焦图像确定模块,用于确定所述当前实景图像帧中的目标聚焦图像;
景深界限确定模块,用于根据所述目标聚焦图像确定所述当前实景图像帧的景深远界限值;
图像参数调节模块,用于对所述景深远界限值对应的图像区域进行图像参数信息的调节处理。
又一方面,本发明实施例提供了一种智能会议终端,包括:光轴平行的至少两个摄像头,还包括本发明上述实施例提供的一种图像处理的装置。
在上述图像处理的方法、装置及智能会议终端中,首先获取通过摄像头捕获的当前实景图像帧,并确定当前实景图像帧中的目标聚焦图像;然后根据目标聚焦图像确定当前实景图像帧的景深远界限值;最终对景深远界限值对应的图像区域进行图像参数信息的调节处理。上述方法、装置以及智能会议终端,能够对视频通话时所捕获图像帧中的局部图像进行调节处理,高效的实现了待处理目标区域的确定以及处理,更好地增加了图像处理的灵活性,有效提升了视频参与者在智能终端上的显示效果。
附图说明
图1为本发明实施例一提供的一种图像处理的方法的流程示意图;
图2为本发明实施例二提供的一种图像处理的方法的流程示意图;
图3为本发明实施例三提供的一种图像处理的装置的结构框图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的一种图像处理的方法的流程示意图,该方法适用于视频通话时对所捕获的图像帧进行图像处理的情况,该方法可以由图像处理的装置执行,其中该装置可由软件和/或硬件实现,并一般集成在具有视频通话功能的智能终端上。
在本实施例中,所述智能终端具体可以是手机、平板电脑、笔记本等智能移动终端,也可以是台式计算机、智能会议终端等固定式的具有视频通话功能的电子设备。
本实施例优选的设定其应用场景为视频通话,对于固定式的智能终端而言,如果其固定放置后的摄像头与室内的窗户相对应,且室外环境的光强度大于室内环境的光强度,则摄像头所捕获当前实景图像帧中的视频参与者将处于背光状态,有可能无法在当前实景图像帧中清晰显示。由此可根据本实施例提供的图像处理方法确定室内窗户所在的具体图像区域,从而对室内窗户所在图像区域的图像亮度以及图像锐度等图像参数进行调节处理。
如图1所示,本发明实施例一提供的一种图像处理的方法,包括如下操作:
S101、获取通过摄像头捕获的当前实景图像帧,并确定当前实景图像帧中的目标聚焦图像。
在本实施例中,进行视频通话时可以通过摄像头实时对捕获空间的图像进行捕获,从而形成当前实景图像帧。此外,在对捕获空间中的图像进行捕获时,会选择一个被摄体作为目标聚焦图像,本实施例在进行图像捕获时,可以将捕获空间中动态被摄体作为目标聚焦图像,此时需要在当前实景图像帧中确定动态被摄体所对应的图像区域,也可以将预先设定的像素信息所对应的图像作为目标聚焦图像,此时需要对上述预先设定的像素信息在在当前实景图像帧中对应的图像区域进行确定,以作为目标聚焦图像。
S102、根据目标聚焦图像确定所述当前实景图像帧的景深远界限值。
在本实施例中,根据上述步骤确定的目标聚焦图像,可以确定该目标聚焦图像到摄像头前节点的实际距离,该实际距离相当于摄像头此时的聚焦距离,在本实施例中,所述聚焦距离可以根据图像聚焦图像的当前像素信息及对应的景深信息来确定,此外,根据所述聚焦距离以及摄像头的属性参数就可以确定摄像头所捕获图像帧的景深范围。
一般地,该景深范围由景深近界限值和景深远界限值形成,所述景深近界限值能够显示在当前实景图像帧中的图像与摄像头之间的最近距离;所述景深远界限值具体可看作能够显示在当前实景图像帧中的图像与摄像头之间的最远距离,因此,确定根据其确定的景深范围,就可确定所述当前实景图像帧的景深远界限值。
S103、对景深远界限值对应的图像区域进行图像参数信息的调节处理。
本步骤中,当前实景图像帧可理解为一个具有景深信息的图像帧,在确定景深远界限值后,可以在当前实景图像帧中确定所述景深远界限值对应的图像区域,进而对确定的图像区域根据其图像参数信息进行调解处理。
示例性地,对于固定式的智能终端而言,当其固定放置后的摄像头与室内的窗户相对且进行视频通话时,为减少所捕获的当前实景画面帧中室内窗户的光强度对视频参与者显示画面的影响,可以通过本步骤将景深远界限值对应图像区域看作室内窗户的所在区域,由此可对所确定的图像区域进行局部的调节处理,进而达到清晰显示视频参与者的目的。
本发明实施例一提供的一种图像处理的方法,该方法首先获取通过摄像头捕获的当前实景图像帧,并确定当前实景图像帧中的目标聚焦图像;然后根据目标聚焦图像确定当前实景图像帧的景深远界限值;最终对景深远界限值对应的图像区域进行图像参数信息的调节处理。利用该方法,能够对视频通话时所捕获图像帧中的局部图像进行调节处理,由此达到清晰显示视频参与者的目的,更好地增加了图像处理的灵活性。
实施例二
图2为本发明实施例二提供的一种图像处理的方法的流程示意图。本发明实施例以上述实施例为基础进行优化,在本实施例中,进一步将获取通过摄像头捕获的当前实景图像帧具体优化为:获取通过至少两个摄像头分别捕获的当前图像帧;对分别捕获的至少两张当前图像帧进行图像合成处理,获得当前实景图像帧;其中,所述当前实景图像帧中各像素点具有相应的景深信息。
在上述优化的基础上,还将确定所述当前实景图像帧中的目标聚焦图像具体化为:根据人物图像特征确定所述当前实景图像帧中的被摄人物,并确定组成所述被摄人物的当前像素信息;在已获取的前一实景图像帧中确定是否存在所述被摄人物;如果存在所述被摄人物,则在所述前一实景图像帧中确定组成所述被摄人物的历史像素信息,并判定所述当前像素信息是否与所述历史像素信息匹配,若否,则确定所述被摄人物的位置发生变化,将所述被摄人物确定为目标聚焦图像;若是,则根据各被摄人物的当前像素信息确定平均像素信息,将所述平均像素信息对应的区域确定为目标聚焦图像;如果不存在所述被摄人物,则获取预设的聚焦像素信息,将所述聚焦像素信息在所述当前实景图像帧中对应的区域确定为目标聚焦图像。
进一步地,所述根据所述目标聚焦图像确定所述当前实景图像帧的景深远界限值,具体可优化为:根据所述目标聚焦图像在所述当前实景图像帧中的当前像素信息,确定所述目标聚焦图像的平面坐标信息;根据所述当前像素信息对应的景深信息,确定所述目标聚焦图像的深度值;根据所述平面坐标信息及所述深度值,确定所述目标聚焦图像到摄像头的实际聚焦距离;根据所述实际聚焦距离及获取的摄像头属性参数,确定所述当前实景图像帧的景深远界限值。
此外,本实施还将对所述景深远界限值对应的图像区域进行图像参数信息的调节处理,具体优化为:获取所述景深远界限值对应的图像区域的图像参数信息,所述图像参数信息包括:图像RGB占比、色彩对比度以及图像锐度;在所述图像参数信息不符合设定的标准参数信息时,控制调节所述图像区域的图像亮度、色彩对比度和/或图像锐度,以使所述图像参数信息符合所述标准参数信息。
如图2所示,本发明实施例二提供一种图像处理的方法,具体包括如下操作:
S201、获取通过至少两个摄像头分别捕获的当前图像帧。
一般地,为获取所捕获图像帧的景深信息,需要捕获具有立体空间感的图像帧,由此可以采用光轴平行设置的至少两个摄像头分别实时的从不同角度进行图像捕获。
在本实施例中,采用多个摄像头进行图像捕获时,所采用的至少两个摄像头在智能终端上的设置位置存在不同,对于同一被摄体而言,该被摄体在不同摄像头所捕获图像帧中的像素位置存在不同,进而可以根据不同的像素位置信息确定被摄体的景深信息。
S202、对分别捕获的至少两张当前图像帧进行图像合成处理,获得当前实景图像帧。
本步骤可以对不同摄像头捕获的当前图像帧进行合成,从而得到具有立体空间感的当前实景图像帧。可以理解的是,所合成的当前实景图像帧中各像素点均具有相应的景深信息,具体地,各像素点景深信息的确定过程可描述为:对不同摄像头所捕获的当前图像帧进行立体匹配,从而获得同一对应点在不同当前图像帧中的视差值,之后可根据视差值与深度的关系,确定不同像素点的景深信息。
在本实施例中,可以对当前实景图像帧中各像素点的景深信息进行存储,以用于后续待处理图像区域的选择。
S203、根据人物图像特征确定当前实景图像帧中的被摄人物,并确定组成该被摄人物的当前像素信息。
在本实施例中,步骤S203至步骤S209具体给出了目标聚焦图像的确定过程。本步骤具体通过预设的人物图像特征来识别确定当前实景图像帧中包含的被摄人物。一般地,视频通话时,摄像头捕获的当前实景图像帧中往往存在一个或多个被摄人物,由此可以根据人物图像特征识别出当前实景图像帧中具体包含的被摄人物数,且在识别存在被摄人物后,还可以确定每个被摄人物在当前实景图像帧中的当前像素信息,所述当前像素信息具体可理解为组成一个被摄人物的所有像素点的像素值范围。
S204、在已获取的前一实景图像帧中确定是否存在该被摄人物,若是,执行步骤S205;若否,执行步骤S209。
本步骤可用来判定当前实景图像帧中的被摄人物是否也出现在前一实景图像帧中,一般地,不同的被摄人物自身具有区别于其他被摄人物的特征(如被摄人物的衣服颜色以及佩戴饰物等),因此可以根据当前实景图像帧中被摄人物自身具有的特征来确定该被摄人物是否存在于前一实景图像帧中,当前一实景图像帧中不存在所判定的被摄人物时,可以进行步骤S209的操作;如果存在所判定的被摄人物时,可以执行步骤S205的操作。
S205、在该前一实景图像帧中确定组成该被摄人物的历史像素信息。
本步骤在前一实景图像帧中确定存在所判定的被摄人物后,可以确定该被摄人物在前一实景图像帧中的像素位置,其所具有的像素位置可记为该被摄人物的历史像素信息。
S206、判定当前像素信息是否与历史像素信息匹配,若否,则执行步骤S207;若是,则执行步骤S208。
需要说明的是,当用于视频通话的智能终端的位置固定不变时,其智能终端的摄像头所对应的捕获空间不会发生变化,且本步骤可将确定的该被摄人物的历史像素信息与当前像素信息进行匹配。
在本实施例中,如果被摄人物处于活动动态,则其在前一实景图像帧中的历史像素信息与在当前实景图像帧中的当前像素信息不能完全匹配,此时可执行步骤S207的操作;如果被摄人物处于静止状态,其历史像素信息与当前像素信息存在匹配的可能,此时可执行步骤S208的操作。
S207、确定该被摄人物的位置发生变化,将该被摄人物确定为目标聚焦图像,之后执行步骤S210。
在本实施例中,当被摄物体的历史像素信息与当前像素信息不匹配时,可确定存在被摄人物发生了变化,此时可将被摄人物确定为目标聚焦图像,并可在确定目标聚焦图像后进行步骤S210的操作。
需要说明的是,如果当前实景图像帧中存在多个位置发生变化的被摄人物,可选取历史像素信息与当前像素信息匹配程度最低的被摄人物作为目标聚焦图像。示例性地,所述历史像素信息与当前像素信息的匹配程度具体可根据匹配的像素点个数确定,所匹配的像素点个数越小,其具有的匹配程度越低。
S208、根据各被摄人物的当前像素信息确定平均像素信息,将平均像素信息对应的区域确定为目标聚焦图像,之后执行步骤S210。
在本实施例中,如果当前实景图像帧中的各被摄人物的当前像素信息与历史像素信息均匹配,可确定被摄人物静止不动,本步骤可根据各被摄人物的当前像素信息,确定当前实景图像帧中所有被摄人物的平均像素信息,由此可将平均像素信息对应的区域确定为目标聚焦图像,并可在确定目标聚焦图像后进行步骤S210的操作。
S209、获取预设的聚焦像素信息,将聚焦像素信息在所述当前实景图像帧中对应的区域确定为目标聚焦图像,之后执行步骤S210。
本步骤对前一实景图像帧中不存在被摄人物体的情况进行处理,其不存在被摄物体的情况一般为所捕获的当前实景图像帧为所捕获的第一帧,不存在前一实景图像帧;或者,所捕获的前一实景图像帧真的不存在被摄人物。
在本实施例中,当符合上述不存在被摄人物的情况时,可以获取预先设定的聚焦像素信息,然后在当前实景图像帧中确定与聚焦像素信息相对应的区域,直接将所确定的区域作为目标聚焦图像,并可在确定目标聚焦图像后进行步骤S210的操作。
需要说明的是,设置在智能终端上的摄像头的可捕获范围一般固定不变,由此本实施例可以根据历史的图像帧捕获时所确定聚焦图像对应的像素信息来设定所述聚焦像素信息。
S210、根据所述目标聚焦图像在所述当前实景图像帧中的当前像素信息,确定所述目标聚焦图像的平面坐标信息。
在本实施例中,所述当前实景图像帧由至少两个摄像头捕获的当前图像帧合成,当前实景图像帧包含了各图像的空间信息(显示在屏幕上的平面坐标信息以及呈现立体感的深度值)。
本实施例可以根据目标聚焦图像的当前像素信息确定其对应的平面坐标信息,具体地,可以根据当前像素信息中各像素点的像素坐标值确定一个平均像素坐标值,本实施例可将该平均像素坐标值看作目标聚焦图像的平面坐标信息
S211、根据所述当前像素信息对应的景深信息,确定所述目标聚焦图像的深度值。
示例性地,本实施例根据预先存储的像素点和景深信息的对应表,可以确定该平均像素坐标值对应的景深信息,并将该景深信息作为目标聚焦图像的深度值。
S212、根据所述平面坐标信息及所述深度值,确定所述目标聚焦图像到摄像头的实际聚焦距离。
在本实施例中,根据该平面坐标信息以及深度值可以确定该目标聚焦图像在立体空间中的投射点,具体的,以智能终端的屏幕的左上角像素原点,在确定目标聚焦图像在立体空间中的投射点后,可以根据其平面坐标信息以及深度值确定该投射点到像素原点的实际距离值,计算出的实际距离值就可看做目标聚焦图像到摄像头的实际聚焦距离。
S213、根据所述实际聚焦距离及获取的摄像头属性参数,确定所述当前实景图像帧的景深远界限值。
在本实施例中,所述摄像头属性参数可以包括:超焦点距离以及镜头焦距,其中,超焦点距离和镜头焦距均与所使用的摄像头类型决定。具体地,根据所述实际聚焦距离以及获取的摄像头属性参数,以及景深近界限的计算公式
Figure BDA0001248505570000111
和景深远界限的计算公式
Figure BDA0001248505570000112
可以确定当前实景图像帧的景深近界限值和景深远界限值,其中,S表示景深近界限值,S表示景深远界限值,H表示摄像头的超焦点距离,D表示分别实际聚焦距离,F表示摄像头的镜头焦距。
示例性地,当摄像头属性参数为:f8的超焦点距离是6.25米(模糊圈标准为0.05mm),摄像头的镜头焦距为50毫米时,如果所述实景聚焦距离为4米,则根据上述公式可确定其具有的景深近界限值为2.45米,还可确定其具有的景深远界限值为11.36米。
S214、获取景深远界限值对应的图像区域的图像参数信息,该图像参数信息包括:图像RGB占比、色彩对比度以及图像锐度。
在本实施例中,所述景深远界限值相当于摄像头所能捕获图像的最远距离,对应于所述当前实景图像帧中的最远图像区域,本实施例可以根据其景深远界限值确定该图像区域,并可以获取该图像区域的图像参数信息,如图像RGB占比、色彩对比度以及图像锐度。
在本实施例中,所述图像RGB占比可用于确定图像区域的亮度值;所述色彩对比度可以是对图像区域中明暗区域最亮的白和最暗的黑之间不同亮度层级的测量,其差异范围越大代表色彩对比度越大,差异范围越小代表色彩对比度越小;所述图像锐度具体可理解为反映图像平面清晰度和图像边缘锐利程度的指标,其图像锐度越高,图像平面上的细节对比度也更高,看起来更清楚。
S215、在图像参数信息不符合设定的标准参数信息时,控制调节图像区域的图像亮度、色彩对比度和/或图像锐度,以使图像参数信息符合标准参数信息。
在本实施例中,可以将所述图像参数信息与设定的标准参数信息进行比对,根据其比对结果分别对图像亮度、色彩对比度和/或图像锐度进行调节处理,最终使图像参数信息符合所述标准参数信息。
可以理解的是,如果景深远界限值对应的图像区域为亮度较高的窗户图像,则经过图像参数信息调节后,就可适当降低窗户图像的显示亮度,进而可以达到在当前实景图像帧中清晰显示视频参与者图像信息的目的。
本发明实施例二提供的一种图像处理的方法,具体化了图像帧的获取过程,同时具体化了目标聚焦图像的确定过程,还具体化了景深远界限值的确定过程以及对景深远界限值所对应图像区域的调解处理过程。该方法能够获取双摄像头捕获合成的图像帧,并可以根据所合成图像帧的景深信息及确定的目标聚焦图像确定图像帧的景深远界限值,由此可以对景深远界限值对应的区域进行图像调解处理。利用该方法,高效的实现了待处理目标区域的确定以及处理,有效避免了对整个图像帧的整体处理,更好地增加了图像处理的灵活性,同时提高了视频通话时的图像处理效率,进而提升了视频参与者在智能终端上的显示效果。
在上述实施例的基础上,本实施例在所述根据人物图像特征确定所述当前实景图像帧的被摄人物之后,还优化增加了:对所述被摄人物进行亮度提升处理。
需要说明的是,基于本实施例上述的图像处理,可以实现景深远界限值所对应图像区域的调节处理,使得当前实景图像帧具有清晰的视频参与者的图像。此外,由于在当前实景图像帧中识别出的被摄人物就可看做视频参与者,所以在对所选中图像区域进行处理的同时,还可以直接对识别出的被摄人物进行亮度提升处理。
具体地,也可以根据被摄人物的当前像素信息和对应的景深信息确定具体的待处理区域,之后确定待处理区域的图像参数信息,并对图像参数信息进行调节,以使被摄人物的亮度有所提升,使得被摄人物能够在当前实景图像帧中具有更好的显示效果。
实施例三
图3为本发明实施例三提供的一种图像处理的装置的结构框图。该装置适用于视频通话时对所捕获的图像帧进行图像处理的情况,其中该装置可由软件和/或硬件实现,并一般集成在具有视频通话功能的智能终端上。如图3所示,该装置包括:实景图像获取模块31、聚焦图像确定模块32、景深界限确定模块33以及图像参数调节模块34。
其中,实景图像获取模块31,用于获取通过摄像头捕获的当前实景图像帧;
聚焦图像确定模块32,用于确定所述当前实景图像帧中的目标聚焦图像;
景深界限确定模块33,用于根据所述目标聚焦图像确定所述当前实景图像帧的景深远界限值;
图像参数调节模块34,用于对所述景深远界限值对应的图像区域进行图像参数信息的调节处理。
在本实施例中,该装置首先通过实景图像获取模块31获取通过摄像头捕获的当前实景图像帧;然后通过聚焦图像确定模块32确定当前实景图像帧中的目标聚焦图像;之后通过景深界限确定模块33根据目标聚焦图像确定当前实景图像帧的景深远界限值;最终通过图像参数调节模块34对景深远界限值对应的图像区域进行图像参数信息的调节处理。
本发明实施例三提供的一种图像处理的装置,能够对视频通话时所捕获图像帧中的局部图像进行调节处理,高效的实现了待处理目标区域的确定以及处理,更好地增加了图像处理的灵活性,有效提升了视频参与者在智能终端上的显示效果。
进一步地,所述实景图像获取模块31,具体用于:获取通过上至少两个摄像头分别捕获的当前图像帧;对分别捕获的至少两张当前图像帧进行图像合成处理,获得当前实景图像帧;其中,所述当前实景图像帧中各像素点具有相应的景深信息。
在上述优化的基础上,所述聚焦图像确定模块32,包括:
被摄人物确定单元,用于根据人物图像特征确定所述当前实景图像帧的被摄人物,并确定组成所述被摄人物的当前像素信息;信息判定单元,用于在已获取的前一实景图像帧中确定是否存在所述被摄人物;第一执行单元,用于当存在所述被摄人物时,在所述前一实景图像帧中确定组成所述被摄人物的历史像素信息,并判定所述当前像素信息是否与所述历史像素信息匹配,若否,则确定所述被摄人物的位置发生变化,将所述被摄人物确定为目标聚焦图像;若是,则根据各被摄人物的当前像素信息确定平均像素信息,将所述平均像素信息对应的区域确定为目标聚焦图像;第二执行单元,用于当不存在所述被摄人物时,获取预设的聚焦像素信息,将所述聚焦像素信息在所述当前实景图像帧中对应的区域确定为目标聚焦图像。
进一步地,聚焦图像确定模块32,还包括:被摄人物处理单元,用于在所述根据人物图像特征确定所述当前实景图像帧的被摄人物之后,对所述被摄人物进行亮度提升处理。
在上述实施例的基础上,所述景深界限确定模块33,具体用于:根据所述目标聚焦图像在所述当前实景图像帧中的当前像素信息,确定所述目标聚焦图像的平面坐标信息;根据所述当前像素信息对应的景深信息,确定所述目标聚焦图像的深度值;根据所述平面坐标信息及所述深度值,确定所述目标聚焦图像到所述摄像头的实际聚焦距离;根据所述实际聚焦距离及获取的摄像头属性参数,确定所述当前实景图像帧的景深远界限值。
进一步地,所述图像参数调节模块34,具体用于:获取所述景深远界限值对应的图像区域的图像参数信息,所述图像参数信息包括:图像RGB占比、色彩对比度以及图像锐度;在所述图像参数信息不符合设定的标准参数信息时,控制调节所述图像区域的图像亮度、色彩对比度和/或图像锐度,以使所述图像参数信息符合所述标准参数信息。
实施例四
本发明实施例四还提供了一种智能会议终端,包括:光轴平行的至少两个摄像头,还包括本发明上述实施例提供的一种图像处理的装置。可以通过上述实施例一和实施例二提供的图像处理的方法进行图像处理。
在本实施例中,所述智能会议终端属于具有视频通话功能的电子设备的一种,所述智能会议终端中集成有视频通话系统,同时还具备至少两个光轴平行的摄像头以及本发明上述实施例提供的图像处理的装置。
在所述智能会议终端中集成本发明上述实施例提供的图像处理的装置之后,在与其他具有视频通话功能的智能终端进行视频通话时,能够对实时捕获的当前实景图像帧中的局部图像进行图像参数信息的调节处理,有效提升了视频参与者在智能会议终端上的显示效果,同时也进一步提高了智能会议终端的用户体验。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,所述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,包括如下步骤:获取通过摄像头捕获的当前实景图像帧,并确定所述当前实景图像帧中的目标聚焦图像;根据所述目标聚焦图像确定所述当前实景图像帧的景深远界限值;对所述景深远界限值对应的图像区域进行图像参数信息的调节处理。所述的存储介质,如:ROM/RAM、磁碟、光盘等。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (8)

1.一种图像处理的方法,其特征在于,包括:
获取通过摄像头捕获的当前实景图像帧,并确定所述当前实景图像帧中的目标聚焦图像;
根据所述目标聚焦图像确定所述当前实景图像帧的景深远界限值;
对所述景深远界限值对应的图像区域进行图像参数信息的调节处理,所述景深远界限值对应的图像区域为所述当前实景图像帧中的最远图像区域;
所述确定所述当前实景图像帧中的目标聚焦图像,包括:
根据人物图像特征确定所述当前实景图像帧中的被摄人物,并确定组成所述被摄人物的当前像素信息;
在已获取的前一实景图像帧中确定是否存在所述被摄人物;
如果存在所述被摄人物,则在所述前一实景图像帧中确定组成所述被摄人物的历史像素信息,并判定所述当前像素信息是否与所述历史像素信息匹配,若否,则确定所述被摄人物的位置发生变化,将所述被摄人物确定为目标聚焦图像;若是,则根据各被摄人物的当前像素信息确定平均像素信息,将所述平均像素信息对应的区域确定为目标聚焦图像;
如果不存在所述被摄人物,则获取预设的聚焦像素信息,将所述聚焦像素信息在所述当前实景图像帧中对应的区域确定为目标聚焦图像。
2.根据权利要求1所述的方法,其特征在于,所述获取通过摄像头捕获的当前实景图像帧,包括:
获取通过至少两个摄像头分别捕获的当前图像帧;
对分别捕获的至少两张当前图像帧进行图像合成处理,获得当前实景图像帧;
其中,所述当前实景图像帧中各像素点具有相应的景深信息。
3.根据权利要求1所述的方法,其特征在于,在所述根据人物图像特征确定所述当前实景图像帧的被摄人物之后,还包括:
对所述被摄人物进行亮度提升处理。
4.根据权利要求2所述的方法,其特征在于,所述根据所述目标聚焦图像确定所述当前实景图像帧的景深远界限值,包括:
根据所述目标聚焦图像在所述当前实景图像帧中的当前像素信息,确定所述目标聚焦图像的平面坐标信息;
根据所述当前像素信息对应的景深信息,确定所述目标聚焦图像的深度值;
根据所述平面坐标信息及所述深度值,确定所述目标聚焦图像到摄像头的实际聚焦距离;
根据所述实际聚焦距离及获取的摄像头属性参数,确定所述当前实景图像帧的景深远界限值。
5.根据权利要求1所述的方法,其特征在于,所述对所述景深远界限值对应的图像区域进行图像参数信息的调节处理,包括:
获取所述景深远界限值对应的图像区域的图像参数信息,所述图像参数信息包括:图像RGB占比、色彩对比度以及图像锐度;
在所述图像参数信息不符合设定的标准参数信息时,控制调节所述图像区域的图像亮度、色彩对比度和/或图像锐度,以使所述图像参数信息符合所述标准参数信息。
6.一种图像处理的装置,其特征在于,包括:
实景图像获取模块,用于获取通过摄像头捕获的当前实景图像帧;
聚焦图像确定模块,用于确定所述当前实景图像帧中的目标聚焦图像;
景深界限确定模块,用于根据所述目标聚焦图像确定所述当前实景图像帧的景深远界限值;
图像参数调节模块,用于对所述景深远界限值对应的图像区域进行图像参数信息的调节处理,所述景深远界限值对应的图像区域为所述当前实景图像帧中的最远图像区域;
所述聚焦图像确定模块,包括:
被摄人物确定单元,用于根据人物图像特征确定所述当前实景图像帧中的被摄人物,并确定组成所述被摄人物的当前像素信息;
信息判定单元,用于在已获取的前一实景图像帧中确定是否存在所述被摄人物;
第一执行单元,用于当存在所述被摄人物时,在所述前一实景图像帧中确定组成所述被摄人物的历史像素信息,并判定所述当前像素信息是否与所述历史像素信息匹配,若否,则确定所述被摄人物的位置发生变化,将所述被摄人物确定为目标聚焦图像;若是,则根据各被摄人物的当前像素信息确定平均像素信息,将所述平均像素信息对应的区域确定为目标聚焦图像;
第二执行单元,用于当不存在所述被摄人物时,获取预设的聚焦像素信息,将所述聚焦像素信息在所述当前实景图像帧中对应的区域确定为目标聚焦图像。
7.根据权利要求6所述的装置,其特征在于,所述实景图像获取模块,具体用于:
获取通过至少两个摄像头分别捕获的当前图像帧;
对分别捕获的至少两张当前图像帧进行图像合成处理,获得当前实景图像帧;
其中,所述当前实景图像帧中各像素点具有相应的景深信息。
8.一种智能会议终端,包括:光轴平行的至少两个摄像头,其特征在于,还包括:如权利要求6-7任一项所述图像处理的装置。
CN201710160930.7A 2017-03-17 2017-03-17 一种图像处理的方法、装置及智能会议终端 Active CN106803920B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201710160930.7A CN106803920B (zh) 2017-03-17 2017-03-17 一种图像处理的方法、装置及智能会议终端
PCT/CN2017/103282 WO2018166170A1 (zh) 2017-03-17 2017-09-25 一种图像处理的方法、装置及智能会议终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710160930.7A CN106803920B (zh) 2017-03-17 2017-03-17 一种图像处理的方法、装置及智能会议终端

Publications (2)

Publication Number Publication Date
CN106803920A CN106803920A (zh) 2017-06-06
CN106803920B true CN106803920B (zh) 2020-07-10

Family

ID=58988136

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710160930.7A Active CN106803920B (zh) 2017-03-17 2017-03-17 一种图像处理的方法、装置及智能会议终端

Country Status (2)

Country Link
CN (1) CN106803920B (zh)
WO (1) WO2018166170A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106803920B (zh) * 2017-03-17 2020-07-10 广州视源电子科技股份有限公司 一种图像处理的方法、装置及智能会议终端
CN111210471B (zh) * 2018-11-22 2023-08-25 浙江欣奕华智能科技有限公司 一种定位方法、装置及系统
CN110545384B (zh) * 2019-09-23 2021-06-08 Oppo广东移动通信有限公司 对焦方法和装置、电子设备、计算机可读存储介质
CN112351197B (zh) * 2020-09-25 2022-10-21 南京酷派软件技术有限公司 一种拍摄参数调整方法、装置、存储介质及电子设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105303543A (zh) * 2015-10-23 2016-02-03 努比亚技术有限公司 图像增强方法及移动终端
CN106331510A (zh) * 2016-10-31 2017-01-11 维沃移动通信有限公司 一种逆光拍照方法及移动终端

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8948468B2 (en) * 2003-06-26 2015-02-03 Fotonation Limited Modification of viewing parameters for digital images using face detection information
US7657171B2 (en) * 2006-06-29 2010-02-02 Scenera Technologies, Llc Method and system for providing background blurring when capturing an image using an image capture device
JP2009290660A (ja) * 2008-05-30 2009-12-10 Seiko Epson Corp 画像処理装置、画像処理方法、画像処理プログラムおよび印刷装置
CN103324004B (zh) * 2012-03-19 2016-03-30 联想(北京)有限公司 对焦方法和图像捕捉装置
US9124762B2 (en) * 2012-12-20 2015-09-01 Microsoft Technology Licensing, Llc Privacy camera
CN104184935B (zh) * 2013-05-27 2017-09-12 鸿富锦精密工业(深圳)有限公司 影像拍摄设备及方法
US9282285B2 (en) * 2013-06-10 2016-03-08 Citrix Systems, Inc. Providing user video having a virtual curtain to an online conference
CN103945118B (zh) * 2014-03-14 2017-06-20 华为技术有限公司 图像虚化方法、装置及电子设备
CN105100615B (zh) * 2015-07-24 2019-02-26 青岛海信移动通信技术股份有限公司 一种图像的预览方法、装置及终端
CN105611167B (zh) * 2015-12-30 2020-01-31 联想(北京)有限公司 一种对焦平面调整方法及电子设备
CN106803920B (zh) * 2017-03-17 2020-07-10 广州视源电子科技股份有限公司 一种图像处理的方法、装置及智能会议终端

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105303543A (zh) * 2015-10-23 2016-02-03 努比亚技术有限公司 图像增强方法及移动终端
CN106331510A (zh) * 2016-10-31 2017-01-11 维沃移动通信有限公司 一种逆光拍照方法及移动终端

Also Published As

Publication number Publication date
CN106803920A (zh) 2017-06-06
WO2018166170A1 (zh) 2018-09-20

Similar Documents

Publication Publication Date Title
CN111028189B (zh) 图像处理方法、装置、存储介质及电子设备
CN112150399B (zh) 基于宽动态范围的图像增强方法及电子设备
CN109089047B (zh) 控制对焦的方法和装置、存储介质、电子设备
US10397486B2 (en) Image capture apparatus and method executed by image capture apparatus
US11431915B2 (en) Image acquisition method, electronic device, and non-transitory computer readable storage medium
CN108322646B (zh) 图像处理方法、装置、存储介质及电子设备
US9961273B2 (en) Mobile terminal and shooting method thereof
CN106803920B (zh) 一种图像处理的方法、装置及智能会议终端
CN110572584B (zh) 图像处理方法、装置、存储介质及电子设备
CN113012081B (zh) 图像处理方法、装置和电子系统
CN110266954B (zh) 图像处理方法、装置、存储介质及电子设备
JP7136956B2 (ja) 画像処理方法及び装置、端末並びに記憶媒体
CN110958401A (zh) 一种超级夜景图像颜色校正方法、装置和电子设备
CN110740266B (zh) 图像选帧方法、装置、存储介质及电子设备
KR101294735B1 (ko) 이미지 처리 방법 및 이를 이용한 촬영 장치
JP2019129446A (ja) 画像処理装置、および画像処理方法、並びにプログラム
CN113298735A (zh) 图像处理方法、装置、电子设备及存储介质
CN111182208B (zh) 拍照方法、装置、存储介质及电子设备
CN112261292A (zh) 图像获取方法、终端、芯片及存储介质
CN106878606B (zh) 一种基于电子设备的图像生成方法和电子设备
CN108513068B (zh) 图像的选取方法、装置、存储介质及电子设备
CN115426449B (zh) 一种拍照方法和终端
KR101491963B1 (ko) 모바일 단말의 아웃 포커싱 영상 통화 방법 및 장치
EP4090006A2 (en) Image signal processing based on virtual superimposition
CN114125408A (zh) 图像处理方法及装置、终端和可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant