CN115830362A - 图像处理方法、装置、设备、介质及产品 - Google Patents

图像处理方法、装置、设备、介质及产品 Download PDF

Info

Publication number
CN115830362A
CN115830362A CN202211367028.XA CN202211367028A CN115830362A CN 115830362 A CN115830362 A CN 115830362A CN 202211367028 A CN202211367028 A CN 202211367028A CN 115830362 A CN115830362 A CN 115830362A
Authority
CN
China
Prior art keywords
image
algorithm
target
node
image processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211367028.XA
Other languages
English (en)
Inventor
占涵冰
赵洪达
刘莹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Douyin Vision Co Ltd
Original Assignee
Douyin Vision Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Douyin Vision Co Ltd filed Critical Douyin Vision Co Ltd
Priority to CN202211367028.XA priority Critical patent/CN115830362A/zh
Publication of CN115830362A publication Critical patent/CN115830362A/zh
Priority to PCT/CN2023/129171 priority patent/WO2024094086A1/zh
Pending legal-status Critical Current

Links

Images

Abstract

本公开实施例提供一种图像处理方法、装置、设备、介质及产品。该方法包括:响应于图像处理请求,获得待处理图像;对所述待处理图像从至少一个解析维度进行解析,获得所述待处理图像的至少一个解析结果;根据所述至少一个解析结果,为所述待处理图像选择目标处理算法;基于所述目标处理算法对所述待处理图像执行相应的图像改进处理,获得改进后的目标图像。解决了图像处理精度不高的问题。

Description

图像处理方法、装置、设备、介质及产品
技术领域
本公开实施例涉及计算机技术领域,尤其涉及一种图像处理方法、装置、设备、介质及产品。
背景技术
目前,计算机视觉领域中,可以设置图像的自动处理链路,以对图像进行处理应用。例如,用户可以上传一个图像,将用户上传的图像经过图像处理链路的处理,获得最终的图像处理结果,并将图像处理结果为用户展示。例如,用户可以上传一个风景图像,从风景图像中经过人脸区域识别、人脸区域的图像裁剪、人脸区域图像的身份识别等图像处理链路,获得最终的身份识别结果。
由以上描述可知,在图像的处理链路中可以包括多种图像处理算法,以实现图像的最终处理。但是,所有图像均使用该图像处理链路时,图像处理准确度并不高。
发明内容
本公开实施例提供一种图像处理方法、装置、设备、介质及产品,以克服所有图像均使用该图像处理链路时,图像处理准确度并不高的问题。
第一方面,本公开实施例提供一种图像处理方法,包括:
响应于图像处理请求,获得待处理图像;
对所述待处理图像从至少一个解析维度进行解析,获得所述待处理图像的至少一个解析结果;
根据所述至少一个解析结果,为所述待处理图像选择目标处理算法;
基于所述目标处理算法对所述待处理图像执行相应的图像改进处理,获得改进后的目标图像。
第二方面,本公开实施例提供一种图像处理装置,包括:
图像获取单元,用于响应于图像处理请求,获得待处理的待处理图像;
图像解析单元,用于对所述待处理图像从至少一个解析维度进行解析,获得所述待处理图像的至少一个解析结果;
算法选择单元,用于根据所述至少一个解析结果,为所述待处理图像选择目标处理算法;
图像处理单元,用于基于所述目标处理算法对所述待处理图像执行相应的图像处理,获得图像处理结果。
第三方面,本公开实施例提供一种电子设备,包括:处理器以及存储器;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,使得所述至少一个处理器执行如上第一方面以及第一方面各种可能的设计所述的图像处理方法。
第四方面,本公开实施例提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,当处理器执行所述计算机执行指令时,实现如上第一方面以及第一方面各种可能的设计所述的图像处理方法。
第五方面,本公开实施例提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如上第一方面以及第一方面各种可能的设计所述的图像处理方法。
本实施例提供的技术方案,针对获取的待处理图像,可以对待处理图像从至少一个解析维度进行解析,可以获得至少一个解析结果。通过至少一个解析结果可以为待处理图像选择目标处理算法。目标处理算法的选择依赖于待处理图像的解析结果,实现对待处理图像的自适应的算法选择,通过算法选择,可以提高图像的处理效率和准确性。在获得目标处理算法之后,可以利用目标处理算法对待处理图像执行相应的图像改进处理,获得改进后的目标图像。这一图像处理方式依赖于图像自身实现目标处理算法的选择,提高选择的目标处理算法和待处理图像的适配度,在利用目标处理算法对待处理图像进行处理时,实现对待处理图像的个性化处理,可以提高待处理图像的处理效率和准确性。
附图说明
为了更清楚地说明本公开实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本公开的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本公开实施例提供的一种图像处理方法的应用示例图;
图2为本公开实施例提供的一种图像处理方法的一个流程示意图;
图3为本公开实施例提供的一种图像处理方法的又一个流程图;
图4为本公开实施例提供的一种图像处理方法的又一个实施例;
图5为本公开实施例提供的一种图像处理方法的又一个流程示意图;
图6为本公开实施例提供的一个算法决策树的示例图;
图7为本公开实施例提供的一种图像处理装置的一个结构示意图;
图8为本公开实施例提供的一种电子设备的硬件结构示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例中的附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本公开一部分实施例,而不是全部的实施例。基于本公开中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本公开保护的范围。
本公开的技术方案可以应用于图像实时应用处理场景中,通过将实时获取的待处理图像从各解析维度进行解析,并将解析获得的结果用于图像的处理算法的选择,实现为图像自动选择处理算法,提高图像算法选择的准确性和精度。
目前,图像的应用方式较为多样化,例如车辆追踪、图像美颜、人脸识别等诸多应用领域。任意一种图像处理中可能会涉及到多种图像处理算法,例如图像去噪、区域识别、图像增强等一系列算法形成的处理链路。图像处理的过程,一般可以包括:用户可以上传一个图像,将用户上传的图像经过图像处理链路的处理,获得最终的图像处理结果,并将图像处理结果为用户展示。例如,用户可以上传一个风景图像,从风景图像中经过人脸区域识别、人脸区域的图像裁剪、人脸区域图像的身份识别等图像处理链路,获得最终的身份识别结果。在图像的处理链路中可以包括多种图像处理算法,且通常各处理链路的算法是固定的,训练过程中也是使用与设计背景相匹配的图像训练获得,并不能适用于其他链路。因此,若任意图像均使用被输入一图像处理链路时,若图像的背景与图像处理链路的背景不同,可能会导致图像处理识别,图像处理准确度并不高。
为了解决上述技术问题,本公开技术方案中,采用对图像分析的方式,获得图像在不同维度,例如清晰度、背景、亮度等维度的分析结果。通过各维度的分析结果,为图像进行自适应性地选择算法,而非采用固定的图像处理链路的方式对采集到的图像进行处理,使得图像的应用范围更广泛,处理效率更高。
本公开实施例中,针对获取的待处理图像,可以对待处理图像从至少一个解析维度进行解析,可以获得至少一个解析结果。通过至少一个解析结果可以为待处理图像选择目标处理算法。目标处理算法的选择依赖于待处理图像的解析结果,实现对待处理图像的自适应的算法选择,通过算法选择,可以提高图像的处理效率和准确性。在获得目标处理算法之后,可以利用目标处理算法对待处理图像执行相应的图像改进处理,获得改进后的目标图像。这一图像处理方式依赖于图像自身实现目标处理算法的选择,提高选择的目标处理算法和待处理图像的适配度,在利用目标处理算法对待处理图像进行处理时,实现对待处理图像的个性化处理,可以提高待处理图像的处理效率和准确性。
下面将以具体实施例对本公开的技术方案以及本公开的技术方案如何解决上述技术问题进行详细说明。下面几个具体实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图对本发明的实施例进行详细描述。
图1是根据本公开图像处理方法的一个应用网络架构图。根据本公开实施例的应用网络架构中可以包括一个电子设备以及一个与该电子设备通过局域网或者广域网进行网络连接的客户端,假设该电子设备可以为个人计算机、普通服务器,超级个人计算机,云服务器等类型的服务器,本公开中对电子设备的具体类型并不作出过多限定。客户端例如可以为手机、平板电脑、个人计算机、智能家电、可穿戴设备等终端设备,本公中对客户端的具体类型并不作出过多限定。
如图1所示,以电子设备为云服务器1,客户端2可以为手机21、平板电脑22等设备中的一个或多个,任一个客户端2可以向云服务器1发起图像处理请求,提供待处理图像至服务器1。云服务器1中可以响应于图像处理请求,获得待处理图像,并根据待处理图像的维度分析结果,对待处理图像的处理算法进行选择,获得目标处理算法,目标处理算法即可以用于对待处理图像的改进处理,获得改进后的目标图像。通过目标图像的分析结果进行算法选择,即可以实现图像的自适应选择,提高图像的选择效率和准确度。
参考图2,图1为本公开实施例提供的一种图像处理方法的一个实施例的流程图,该图像处理方法可以包括以下几个步骤:
201:响应于图像处理请求,获得待处理图像。
可选地,图像处理请求可以为用户发起。在实际应用中,为了提高图像处理效率,可以提供图像处理页面,图像处理页面可以包括图像上传控件或者视频上传控件。电子设备可以检测用户触发图像上传控件或者视频上传控件可以确定用户发起图像处理请求,并获取用户上传的图像或视频,以从用户上传的图像或视频中获取待处理图像。
示例性地,待处理图像可以包括:单个人物图像、多个人物的图像、不同类型的商品类图像、自然场景下拍摄的图像等。由于待处理图像所属类别较多,不同类别的图像处理目的以及角度不同,相关技术中直接将图像输入到已设置的图像处理模型中,可能会导致图像的处理精度不高。因此,本实施例中采用自适应性的方式,对待处理图像进行图像分析,以利用图像分析结果为图像获取相应的图像处理算法。
待处理图像的图像类型未知。待处理图像可以属于多个图像类型中的任一种图像类型。图像类型可以指按照图像中的人物数量设置的数量类型、图像中包含的物体对应的图像类型、图像背景的分类等类型中的任意一种,例如车辆背景、建筑物背景、自然风光背景、纯色背景等多种类型。本实施例中,并不对图像所属类型进行过多限定。不同图像处理类型的处理算法可以不同。
202:对待处理图像从至少一个解析维度进行解析,获得待处理图像的至少一个解析结果。
为了解决不同图像类型的待处理图像的算法获取问题,可以对待处理图像在不同解析维度进行解析。
解析维度可以指对待处理图像进行图像分析的角度,也即,通过解析维度可以定义图像分析的内容和对分析结果的需求。
解析结果可以为对待处理图像在某个解析维度进行解析获得的结果。例如解析维度为亮度维度时,解析结果可以为解析获得的图像亮度值。
解析维度可以包括一个或多个,可以根据实际的使用需求设置。例如,对于简单的图像处理场景,例如人脸识别场景,可以将人像数量和亮度两个角度作为解析维度。而对于图像美化场景,可以将亮度、分辨率、噪声等角度作为解析维度。
203:根据至少一个解析结果,为待处理图像选择目标处理算法。
可选地,可以从至少一个解析维度分别对待处理图像进行解析,获得各解析维度的解析结果。至少一个解析结果可以包括至少一个解析维度分别对应的解析结果。为了对解析结果进行有效利用,至少一个解析结果也可以为至少一个解析维度分别对应的解析结果中的有效解析结果。有效解析结果可以为对相应的解析维度的解析结果进行有效性判断,获得的有效解析结果。
目标处理算法可以为对待处理图像进行图像处理的图像处理算法。图像处理算法可以包括至少一个。
目标处理算法可以利用至少一个解析结果,进行结果分析和算法选择获得。通过至少一个解析结果,可以对待处理图像所需要的目标处理算法准确获取,实现待处理图像的解析结果的高效利用。
204:基于目标处理算法对待处理图像执行相应的图像改进处理,获得改进后的目标图像。
目标处理算法可以包括至少一个,可以利用目标处理算法整体对待处理图像执行相应的图像改进处理,获得改进后的目标图像。
目标图像可以为目标处理算法中最后一个处理算法对输入的数据进行处理获得的输出数据。目标图像可以作为输入数据输入到目标处理算法中的第一个处理算法。各处理算法顺序执行,前一个处理算法的输出数据可以作为后一个处理算法的输入数据。
本公开实施例中,对待处理图像从至少一个解析维度进行解析,可以获得至少一个解析结果。通过至少一个解析结果可以为待处理图像选择目标处理算法。目标处理算法的选择依赖于待处理图像的解析结果,实现对待处理图像的自适应的算法选择,通过算法选择,可以提高图像的处理效率和准确性。在获得目标处理算法之后,可以利用目标处理算法对待处理图像执行相应的图像改进处理,获得改进后的目标图像。
在实际应用中,可以设置图像的解析模型,通过各种解析模型对待处理图像从不同维度进行解析,获得各维度的解析结果。作为一个实施例,对待处理图像从至少一个解析维度进行解析,获得待处理图像的至少一个解析结果,可以包括:
获取与各解析维度相匹配的图像解析模型;
将待处理图像分别输入各解析维度的图像解析模型进行解析计算,获得待处理图像在至少一个解析维度分别对应的解析结果,得到待处理图像的至少一个解析结果。
可选地,图像解析模型可以包括:图像质量解析模型、图像元信息解析模型、物体识别模型、场景判断模型、版权辨别模型等模型中的至少一个。
其中,图像质量解析模型可以用于对图像的质量相关的参数进行检测。图像质量解析模型可以包括:VQScore(Video Quality Score,画质评估)模型、噪声检测模型、亮度检测模型、色彩检测模型、对比度检测模型、美学检测模型中的至少一个。
图像元信息可以指图像的生成过程中所涉及到的属性信息。图像元信息解析模型可以用于解析图像的某种元信息。图像元信息解析模型可以包括:分辨率检测模型、格式获取模型、编码质量解析模型、透明度检测模型、主题色分析模型中的至少一个。
物体识别模型可以为对图像中的物体所属种类进行识别的模型。物体识别模型可以包括:人像识别模型、车辆识别模型、产品识别模型、车牌识别模型中的至少一个。
场景判断模型可以用于对图像的获取场景进行检测的模型。场景判断模型可以包括:风景检测模型、合成图检测模型、漫画图检测模型。
版权辨别模型可以用于检测图像的版权信息,将版权信息用于后续的算法选择,例如,若检测到图像存在水印,可以将水印去除模型作为图像处理算法。版权辨别模型可以包括:文字识别模型、标识检测模型、PS痕迹识别模型、水印检测模型中的至少一个。
本公开实施例中,通过为各解析维度设置相匹配的图像解析模型,可以将待处理图像输入各解析维度的图像解析模型进行解析计算,将待处理图像在至少一个解析维度分析进行解析。通过为各解析维度设置图像解析模型的方式,可以实现对待处理图像从各解析维度进行解析,提高待处理图像的解析效率和准确性。
如图3所示,为本公开实施例提供的一种图像处理方法的又一个实施例的流程图,与前述实施例的不同之处在于,根据至少一个解析结果,为待处理图像选择目标处理算法,可以包括:
301:确定算法决策树中的至少一个图像处理节点,算法决策树由至少一个图像处理节点按照各节点的算法选择策略建立连接。
可选地,本实施例中提供算法决策树可以包括利用“树”结构来进行决策的数据结构,图像处理节点可以为算法决策树中的节点,算法决策树可以用于图像算法的判定,以确定各图像处理节点关联的算法。
算法决策树可以包括至少一个图像处理节点,至少一个图像处理节点可以按照各节点的算法选择策略连接形成算法决策树。每个图像处理节点可以关联算法选择策略。各图像处理节点的算法选择策略可以用于相应图像处理节点的算法选择。
算法选择策略可以包括为各图像处理节点设置的算法选择策略,通过执行算法选择策略可以获得相应图像处理节点的图像处理算法。
302:从至少一个解析结果中为各图像处理节点选择目标解析结果,获得各图像处理节点对应的目标解析结果。
目标解析结果可以包括多个,每个目标解析结果可以对应相应的解析内容信息,解析内容信息可以包括所解析的内容进行描述的文字。解析结果例如可以包括通过亮度检测模型检测获得的亮度值。图像处理节点中可以包括图像增强节点,图像增强节点可以包括亮度增强节点。
各图像处理节点对应的目标解析结果可以包括按照图像处理节点的处理功能或者处理需求所选择的目标解析结果。
303:利用各图像处理节点的目标解析结果,确定算法决策树中满足算法执行条件的目标处理节点。
算法决策树可以包括至少一个图像处理节点,可以确定决策算法树中满足算法执行条件的目标处理节点。算法执行条件可以指图像处理节点执行关联算法的判断条件,若确定图像处理节点满足算法执行条件,则确定该图像处理节点为目标处理节点,若确定图像处理节点不满足算法执行条件,则确定该图像处理节点为目标处理节点。
不同图像处理节点的算法执行条件可以不同,可以根据图像处理节点的处理功能确定。以亮度增强节点为例,可以设置算法执行条件为亮度值小于30,而以色彩校正节点为例,可以设置算法执行条件为色彩值小于55。因此,对于任意图像处理节点而言,可以根据图像处理节点的处理功能或者需求确定相应的算法执行条件。
304:按照算法选择策略选择目标处理节点的目标处理算法,以获得待处理图像的目标处理算法。
算法选择策略可以包括算法执行条件,算法执行条件可以作为算法选择策略的部分策略,除算法执行条件之外,算法选择策略还可以包括算法的具体选择策略。算法选择策略可以包括两个步骤,第一个步骤可以为根据算法执行条件判断图像处理节点是否满足算法执行条件,第二个步骤是在图像处理节点为满足算法执行条件的目标处理节点的情况下,可以对节点关联的算法进行选择,获得节点的目标处理算法。
本实施例中,在为算法决策树进行算法选择时,可以根据至少一个图像处理节点以及各图像处理节点分别管理的算法选择策略进行算法选择,通过为各图像处理节点设置图像处理算法的方式,可以对各图像处理节点进行针对性的算法选择,使得各图像处理节点的算法选择针对性更强,准确性更高。
为了便于理解,如图4所示,为本实施例提供的一种图像处理方法的又一个实施例的流程图,与前述实施例的不同之处在于,利用各图像处理节点的目标解析结果,确定算法决策树中满足算法执行条件的目标处理节点,可以包括:
401:按照自顶向下的顺序,从算法决策树的第一个图像处理节点开始,判断图像处理节点的目标解析结果是否满足算法执行条件;若是,则执行402,若否则执行405。
示例性地,在一个实施例中,若确定图像处理节点的目标解析结果满足算法执行条件,则确定图像处理节点为目标处理节点,并在按照算法选择策略选择目标处理节点的目标处理算法之后,进入目标处理算法关联的下一个图像处理节点,继续执行判断图像处理节点的目标解析结果是否满足算法执行条件。在又一个实施例中,若确定图像处理节点的目标解析结果不满足算法执行条件,则进入图像处理节点关联的下一个图像处理节点,继续执行判断图像处理节点的目标解析结果是否满足算法执行条件。
可选地,算法执行条件可以通过算法选择策略来执行条件判断步骤。算法选择策略包括至少一个数值区间,至少一个数值区间包括第一数值区间和第二数值区间。图像处理节点的目标解析结果满足算法执行条件可以包括图像处理节点的目标解析结果不属于至少一个数值区间中的第一数值区间,或者图像处理节点的目标解析结果属于至少一个数值区间中的第二数值区间。
402:确定图像处理节点为目标处理节点。
403:按照算法选择策略选择目标处理节点的目标处理算法。
404:进入目标处理算法关联的下一个图像处理节点,返回执行步骤401中的判断步骤,直至算法决策树遍历结束。
405:进入图像处理节点关联的下一个图像处理节点,返回执行步骤401中的判断步骤,直至算法决策树遍历结束。
406:获取算法决策树遍历结束时得到的目标处理节点。
可选地,算法决策树可以包括多个层,每层可以包括一个或多个节点,不同层节点之间可以存在连接关系。节点可以指图像处理节点。
按照自顶向下的顺序可以指从算法决策树的第一层开始,从上到下,依次确定被遍历到的图像处理节点是否满足算法执行条件。在实际应用中,遍历算法决策树过程中并非每个图像处理节点均被遍历到,可以按照算法选择策略进行图像处理节点的选择,以实现算法决策树的整体决策。
算法决策树可以为至少一个图像处理节点按照各图像处理节点之间的算法选择策略所对应的连接关系形成树结构。
本实施例中,在执行目标处理节点的选择时,可以按照自顶向下的顺序,从算法决策树中的第一个图像处理节点开始,判断图像处理节点的目标解析结果是否满足算法执行条件,通过算法执行条件的判断,可以获得满足算法执行条件的目标处理算法,实现高效而准确地选择目标处理算法。在判断算法执行条的基础上,可以进入到下一个图像处理节点,实现算法决策树的顺利执行,直至算法决策树遍历结束。通过算法决策树中各图像处理节点的顺序条件判断,实现目标处理节点的准确选择。
作为一种可能的实施方式,算法选择策略包括图像处理节点的至少一个数值区间,各数值区间关联图像处理算法或下一个图像处理节点,且各数值区间的图像处理算法连接下一个图像处理节点;
利用各图像处理节点的目标解析结果,确定算法决策树中满足算法执行条件的目标处理节点,包括:
确定各图像处理节点的算法选择策略对应的至少一个数值区间;
从各图像处理节点对应的至少一个数值区间中确定直接关联下一个图像处理节点的第一数值区间;
遍历算法决策树,若任一个图像处理节点的目标解析结果不属于图像处理节点的第一数值区间,则确定图像处理节点为满足算法执行条件的目标处理节点,获得算法决策树汇总的目标处理节点。
图像处理节点可以关联一个或多个图像处理算法,图像处理节点可以按照不同数值区间进行数据分类。数值区间可以根据图像处理节点的处理功能或者需求设置,可以按照图像处理节点的解析结果对应的数据类型进行数据区间的划分。例如,以亮度值为例,亮度值越高,图像质量越好,而以噪声值为例时,噪声值越高,图像质量越差。数值区间可以根据图像处理节点的实际处理需求设置获得。
可选地,图像处理节点的目标解析结果属于第一数值区间可以包括若目标解析结果的数值大于第一数值区间的下界和/或小于第一数值区间的上界,则可以确定目标解析结果属于第一数值区间,否则,目标解析结果不属于第一数值区间。第一数值区间的下界和上界可以指形成区间范围的两个实数,下界实数小于上界实数。
可选地,若算法选择策略中仅未设置数值区间,则可以默认算法选择策略的数值区间为无穷大到无穷小。若算法选择策略设置图像处理算法,则直接确定图像处理算法为该图像处理节点的目标处理算法即可。若算法选择策略未设置图像处理算法,则跳过该图像处理节点,进入到下一个图像处理节点。
本公开实施例中,针对不同的图像处理节点可以设置不同的算法选择策略,不同算法选择策略的设置可以实现相应的图像处理节点的算法的快速选定,避免因算法选择策略单一导致算法选择模式固定的问题,提高算法选择效率和准确度。同时,通过数值区间的设置可以实现对图像处理节点从多个数据阶段的设置,提高图像处理节点的设置准确度和精度。
在具体的实施过程中,按照算法选择策略选择目标处理节点的目标处理算法,可以包括:
确定算法选择策略对应至少一个数值区间中除第一数值区间之外的第二数值区间;
基于目标处理节点的目标解析结果,从第二数值区间中确定目标解析结果所属的目标数值区间;
将目标数值区间关联的图像处理算法作为目标处理节点的目标处理算法。
可选地,算法选择策略可以包括至少一个数值区间,数值区间可以关联图像处理算法或者不关联图像处理算法,未关联图像处理算法的数值区间可以连接下一个图像处理节点。若前一个图像处理节点的目标解析结果所在的数值区间未关联图像处理算法,可以确定该图像处理节点不满足算法选择条件。
本实施例中,可以确定算法选择策略中的至少一个数值区间中的第二数值区间,第二数值区间可以为关联图像处理算法的数值区间,因此,利用第二数值区间和目标解析结果进行数值的匹配,可以获得准确的目标处理算法,提高目标处理算法的选择效率和准确度。
为了便于理解,如图5所示,为本实施例提供的一种图像处理方法的又一个实施例的流程图,与前述实施例的不同之处在于,目标处理节点以及目标处理节点的目标处理算法的确定,可以通过以下步骤获得:
501:按照自顶向下的顺序,从算法决策树的第一个图像处理节点开始,获取各图像处理节点的算法选择策略对应至少一个数值区间。
502:确定至少一个数值区间中的第一数值区间和第二数值区间。第一数值区间关联下一个图像处理节点,第二数值区间关联图像处理算法,图像处理算法关联下一个图像处理节点。不同数值区间关联的下一个图像处理算法可以相同可以不同,可以根据算法选择需求设置获得。
503:判断图像处理节点的目标解析结果是否属于第一数值区间,若是,则执行504,若否则执行505。
504:确定该图像处理节点不为目标处理节点,切换至该图像处理节点在第一数值区间关联的下一个图像处理节点,返回执行501。
505:确定该图像处理节点为目标处理节点;
506:基于目标处理节点的目标解析结果,从第二数值区间中确定图像处理节点所处的目标数值区间。
507:将目标数值区间关联的图像处理算法作为目标处理节点的目标处理算法,切换至目标处理算法关联的下一个图像处理节点,返回执行501。
508:获取算法决策树遍历结束时得到的目标处理节点。
当然,在实际应用中,至少一个数值区间还可以包括第三数值区间等其它数值区间,本实施例中对至少一个数值区间的数量并不作出具体限定,本实施例中所示的第一数值区间和第二数值区间是为了对本方案中目标解析结果和第一数值区间、第二数值区间的比对进行详细说明,并不应视为对本公开技术方案的详细限定。
本实施例中,在从算法决策树中选择目标处理算法和目标处理节点时,可以利用算法决策树的树状结构,从第一个图像处理节点开始,对图像处理节点的数值区间进行了划分,获得直接关联下一个图像处理节点的第一数值区间,和未直接关联下一个图像处理节点的第二数值区间,通过第二数值区间和第二数值区间的联合应用,可以快速完成目标处理节点以及目标处理节点关联的目标处理算法的选择,提高选择效率和准确度。
在实际应用中,为了对图像进行更详细的图像处理,图像处理节点可以由若干处理节点组形成。通常可以包括图像增强节点、内容提取节点、图像修复节点。
示例性地,图像增强节点可以由分辨率增强节点、降噪节点、亮度增强节点、色彩校正节点中的至少一个。
作为一种可选实施方式,图像处理节点包括:图像增强节点;图像增强节点具体包括:分辨率增强节点、降噪节点、亮度增强节点、色彩校正节点中的至少一个;
分辨率增强节点对应的目标解析结果包括:分辨率值;
降噪节点对应的目标解析结果包括:清晰度和噪声评分;
亮度增强节点对应的目标解析结果包括:亮度值;
色彩校正节点对应的目标解析结果包括:色彩评分。
可选地,图像增强节点除可以包括分辨率增强节点、降噪节点、亮度增强节点、色彩校正节点中的至少一个之外,还可以包括:人像增强节点、图像质量增强节点、人像瘦身节点、色彩增强节点、降噪节点等至少一个节点。通过图像增强节点可以对图像质量进行增强,提高后续图像的处理效果。
本实施例中,通过设置图像增强节点的多个处理节点包括分辨率增强节点、降噪节点、亮度增强节点、色彩校正节点中的至少一个,可以从分辨率、噪声、亮度、色彩等多个维度对图像进行修复,提高图像的增强角度和准确性。
作为又一种可选实施方式,图像处理节点还包括:内容提取节点;内容提取节点对应的目标解析结果包括:人像数量。
可选地,内容提取节点除包含内容提取节点之外,还可以包括:人像区域提取节点、对象区域分割节点、显著性分割节点中的至少一个。
通过一个或多个内容提取节点可以设置不同的提取功能。利用不同的提取功能实现相应的处理算法。
本实施例中,利用内容提取节点对图像进行处理,获得相应的处理节点,通过处理节点实现人像数量的分析,以利用人像数量对图像进行针对性的分析,实现对图像内容的详细分析。
作为又一种可选实施方式,图像处理节点还包括:图像修复节点;图像修复节点包括:图像擦除算法、图像扩展算法、图像裁剪算法、人像瘦身算法中的至少一个。
可选地,图像扩展算法可以包括产品修复算法、漫画修复算法、风景修复算法等,可以根据图像处理类型选择相应的处理算法,实现算法的类型选择,提高算法和图像处理类型的关联度,提高算法处理效率。
本实施例中,对于图像修复节点而言,从图像擦除算法、图像扩展算法、图像裁剪算法、图像瘦身算法中选择任意一个,实现对图像的针对性修复,提高图像的修复效率和准确性。
为了便于理解,参考图6为本公开实施例提供的一种算法决策树的又一个示例图,该图像处理方法中,至少一个解析维度分别对应的图像解析模型可以包括:画质检测算法、亮度检测算法、色彩检测算法、对比度检测算法、美学检测算法、噪声检测算法、人像识别算法等算法。通过上述算法可以检测待处理图像的分辨率、画质清晰度、色彩度、亮度、对比度、美学分数、噪声评分、人像数量等解析结果。上述解析结果可以用于目标处理算法的选择。
其中,算法决策树可以包括:图像增强节点601、内容提取节点602以及图像修复节点603。
示例性地,图像增强节点601可以包括分辨率增强节点6011、清晰度增强节点6012、降噪节点6013、亮度增强节点6014、色彩增强节点6015。
进一步地,图像增加节点601中的第一个处理节点可以为分辨率增强节点6011。分辨率增强节点6011可包括分辨率的三个数值区间,分别为(0,360p)(360p,1080p)以及大于1080p。其中,(0,360p)(360p,1080p)两个数值区间属于第二数值区间,(0,360p)关联4倍超分辨率算法,(360p,1080p)关联2倍超分辨率算法。而大于1080P为第一数值区间,并未关联图像处理算法,直接连接画质的清晰度增强节点6012。在通过分辨率增强算法对待处理图像进行分辨率增加之后,可以进入降噪节点6013。
降噪节点6013可以包括两个噪声区间,分别为噪声值大于70和噪声值小于70两个数值区间。噪声大于70的第二数值区间关联降噪算法,噪声小于70的第一数值区间直接连接亮度增强节点6014。
而清晰度增强节点6012可以包括大于60和小于60两个数值区间,若噪声分数大于60的第二数值区间直接连接亮度增强节点6014,若噪声分数小于60为第一数值区间,则基于小于60的数值区间关联的画质增强算法对待处理图像进行画质增强。
亮度增强节点6014可以包括两个数值区间,分别为大于30的第一数值区间和小于30的第二数值区间。小于30的第二数值区间关联有亮度增强算法,小于30的第一数值区间直接连接内容提取节点602。
降噪节点6013的第二数值区间关联的降噪算法,降噪算法可以连接色彩增强节点6015。其中,色彩增强节点6015可以包括3个数值区间,分别为色彩值小于25,大于25且小于55,以及大于55。色彩值小于25关联HDR色彩增强算法,为第二数值区间,色彩值大于25且小于55关联色彩校正算法为第二数值区间,而色彩值大于55直接连接内容提取节点502,为其第一数值区间。
内容提取节点602对应的解析结果可以为人像数量,内容提取节点602可以包括3个数值区间,分别为大于1且小于等于2,大于3,以及0。其中,大于1且小于等于2可以关联磨皮算法为第二数值区间,3个以上可以关联人像增强算法作为第二数值区间,为0时直接进入图像修复节点503为第一数值区间。而图像经过磨皮算法或者人像增强算法均可以连接图像修复节点603。其中,图像修复节点603可以按照人像美容类型关联智能瘦身算法。
参考图6所示的算法决策树,假设任意待处理图像的分辨率为256、色彩度为30、亮度为20、对比度为30、美学分数为50、噪声评分为50、人像数量为2。经过分辨率增强节点6011的判断其分辨率256属于(0,360p)的第二数值区间,在分辨率增强节点6011对应的目标处理算法为4倍超分辨率算法。之后,进入4倍超分辨率算法连接的降噪节点6013,噪声评分50属于小于70的第一数值区间,该不需要进行降噪。之后,进入亮度增强节点6014。亮度值为20,不属于第一数值区间,属于小于30的第二数值区间,亮度增强节点为目标处理节点,可以适用小于30关联的亮度增强算法。之后,进入亮度增强算法连接的内容提取节点602,人像数量为2,则可以确定内容提取节点为目标处理节点,对应的目标处理算法为磨皮算法。之后可以进入图像修复节点603,此图像修复节点603直接关联有瘦身算法,可以确定图像修复节点为目标处理节点,对应的目标处理算法为瘦身算法。
因此,可以确定分辨率增强节点6011、亮度增强节点6014、内容提取节点602以及图像修复节点603为目标处理节点,并可以获得各目标处理算法关联的目标处理算法。
在实际应用中,为了实现图像的顺利处理,可以按照各图像处理节点在算法决策树中的位置顺序进行处理。作为一个实施例,目标处理节点包括至少一个,还包括:
基于至少一个目标处理节点在算法决策树中的位置,确定至少一个目标处理节点分别对应的处理顺序;
基于目标处理算法对待处理图像执行相应的图像处理,获得图像处理结果,包括:
按照至少一个目标处理节点分别对应的处理顺序,顺序执行各目标处理节点的目标处理算法,获得各目标处理节点的节点处理结果,前一个目标处理节点输出的节点处理结果作为后一个目标处理节点的输入;
获得最后一个目标处理节点对应的节点处理结果为图像处理结果。
可选地,目标处理节点在算法决策树中的位置可以指节点在算法决策树中的层数和同一层的顺序。
本实施例中,通过确定至少一个目标处理节点分别对应的处理顺序,分别执行各目标处理节点的目标处理算法,以使得至少个一个目标处理节点按顺序依次执行,实现各目标处理节点的目标处理算法的顺利执行,对至少一个目标处理节点的执行效率和执行可靠性有效提升,提高图像处理效率。
为了对各图像处理节点的目标解析结果准确选择,从至少一个解析结果中为各图像处理节点选择目标解析结果,获得各图像处理节点对应的目标解析结果,包括:
根据各图像处理节点的处理需求信息和至少一个解析结果分别对应的解析内容信息;
根据至少一个解析结果分别对应的解析内容信息,将与各图像处理节点的处理需求信息相似性最高的解析内容信息对应的解析结果作为各图像处理节点的目标解析结果。
可选地,可以将图像处理节点的处理需求信息分别与至少一个解析结果的解析内容信息进行匹配,获得图像处理节点在至少一个解析结果分别对应的匹配度,以将匹配度最高的解析结果作为图像处理节点的目标解析结果。
处理需求信息与解析内容信息的信息匹配可以包括将处理需求信息和解析内容信息进行分词匹配,获得处理需求信息和解析内容信息的相似度。也即相似度可以指存在相同或相近含义的词语数量或者比例。
本实施例中,为图像处理节点选择解析内容信息时,可以根据图像处理节点的处理需求信息与至少一个解析结果分别对应的解析内容信息分别进行信息的匹配。通过信息的匹配,可以实现各图像处理节点和不同解析维度的适配,实现为各图像处理节点的目标解析结果的准确获取,提升各处理节点的算法选择的准确性。
作为又一个实施例,根据至少一个解析结果,为待处理图像选择目标处理算法之后,还包括:
将目标处理算法从图像处理算法库中调度到算法容器中;
基于目标处理算法对待处理图像执行相应的图像改进处理,获得改进后的目标图像,包括:
在算法容器中,基于目标处理算法对待处理图像执行相应的图像改进处理,获得改进后的目标图像。
可选地,算法容器(context)可以指为待处理图像建立的独立的算法运行空间。在算法容器可以实现算法的独立运行。算法容器可以是针对待处理图像创建的CUDA(ComputeUnified Device Architecture,统一计算架构)上下文。
其中,将目标处理算法从图像处理算法库中调度到算法容器中可以包括:通过算法调度器将目标处理算法从图像处理算法库中调度到算法容器中。
图像处理算法库可以存储训练获得的图像处理算法。将目标处理算法调度到算法容器中可以指将目标处理算法的参数从图像处理算法库调度到算法容器中,实现算法容器对目标处理算法的独立运行,使得待处理图像的图像处理过程独立于其它算法容器,提高算法运行的效率和安全性。
本实施例中,在确定目标处理算法之后,可以将目标处理算法调度到算法容器中,通过算法容器执行目标处理算法,可以令目标处理算法的执行过程独立于其它容器,提高算法的执行效率和安全性。
如图7所示,为本公开实施例提供的一种图像处理装置的一个实施例的结构示意图,该图像处理装置700可以包括以下几个单元:
图像获取单元701:用于响应于图像处理请求,获得待处理的待处理图像。
图像解析单元702:用于对待处理图像从至少一个解析维度进行解析,获得待处理图像的至少一个解析结果。
算法选择单元703:用于根据至少一个解析结果,为待处理图像选择目标处理算法。
图像处理单元704:用于基于目标处理算法对待处理图像执行相应的图像处理,获得图像处理结果。
作为一个实施例,图像解析单元,包括:
模型获取模块,用于获取与各解析维度相匹配的图像解析模型;
图像解析模块,用于将待处理图像分别输入各解析维度的图像解析模型进行解析计算,获得待处理图像在至少一个解析维度分别对应的解析结果,得到待处理图像的至少一个解析结果。
作为又一个实施例,算法选择单元,包括:
第一确定模块,用于确定算法决策树中的至少一个图像处理节点,算法决策树由至少一个图像处理节点按照各节点的算法选择策略建立连接;
结果选择模块,用于从至少一个解析结果中为各图像处理节点选择目标解析结果,获得各图像处理节点对应的目标解析结果;
结果获取模块,用于利用各图像处理节点的目标解析结果,确定算法决策树中满足算法执行条件的目标处理节点;
算法选择模块,用于按照算法选择策略选择目标处理节点的目标处理算法,以获得待处理图像的目标处理算法。
在某些实施例中,结果获取模块,包括:
条件判断子模块,用于按照自顶向下的顺序,从算法决策树的第一个图像处理节点开始,判断图像处理节点的目标解析结果是否满足算法执行条件;
第一处理子模块,用于若确定图像处理节点的目标解析结果满足算法执行条件,则确定图像处理节点为目标处理节点,并在按照算法选择策略选择目标处理节点的目标处理算法之后,进入目标处理算法关联的下一个图像处理节点,继续执行判断图像处理节点的目标解析结果是否满足算法执行条件;
第二处理子模块,用于若确定图像处理节点的目标解析结果不满足算法执行条件,则进入图像处理节点关联的下一个图像处理节点,继续执行判断图像处理节点的目标解析结果是否满足算法执行条件;
目标获取子模块,用于获取算法决策树遍历结束时得到的目标处理节点。
作为一个实施例,算法选择策略包括图像处理节点的至少一个数值区间,各数值区间关联图像处理算法或下一个图像处理节点,且各数值区间的图像处理算法关联下一个图像处理节点;
结果获取模块,包括:
第一确定子模块,用于确定各图像处理节点的算法选择策略对应的至少一个数值区间;
区间获取子模块,应用于从各图像处理节点对应的至少一个数值区间中确定直接关联下一个图像处理节点的第一数值区间;
节点遍历子模块,用于遍历算法决策树,若任一个图像处理节点的目标解析结果不属于图像处理节点的第一数值区间,则确定图像处理节点为满足算法执行条件的目标处理节点,获得算法决策树汇总的目标处理节点。
作为一个实施例,算法选择模块,包括:
第二确定子模块,用于确定算法选择策略对应至少一个数值区间中除第一数值区间之外的第二数值区间;
第三确定子模块,用于基于目标处理节点的目标解析结果,从第二数值区间中确定目标解析结果所属的目标数值区间;
算法关联子模块,用于将目标数值区间关联的图像处理算法作为目标处理节点的目标处理算法。
作为一种可选实施方式,图像处理节点包括:图像增强节点;图像增强节点具体包括:分辨率增强节点、降噪节点、亮度增强节点、色彩校正节点中的至少一个;
分辨率增强节点对应的目标解析结果包括:分辨率值;
降噪节点对应的目标解析结果包括:清晰度和噪声评分;
亮度增强节点对应的目标解析结果包括:亮度值;
色彩校正节点对应的目标解析结果包括:色彩评分。
作为又一种可选实施方式,图像处理节点还包括:内容提取节点;内容提取节点对应的目标解析结果包括:人像数量。
作为又一种可选实施方式,图像处理节点还包括:图像修复节点;图像修复节点包括:图像擦除算法、图像扩展算法、图像裁剪算法、人像瘦身算法中的至少一个。
作为一个实施例,目标处理节点包括至少一个,还包括:
顺序确定单元,用于基于至少一个目标处理节点在算法决策树中的位置,确定至少一个目标处理节点分别对应的处理顺序;
图像处理单元,包括:
顺序执行模块,用于按照至少一个目标处理节点分别对应的处理顺序,顺序执行各目标处理节点的目标处理算法,获得各目标处理节点的节点处理结果,前一个目标处理节点输出的节点处理结果作为后一个目标处理节点的输入;
结果获取模块,用于获得最后一个目标处理节点对应的节点处理结果为图像处理结果。
在某些实施例中,结果选择模块,包括:
内容获取子模块,用于根据各图像处理节点的处理需求信息和至少一个解析结果分别对应的解析内容信息;
信息匹配子模块,用于根据至少一个解析结果分别对应的解析内容信息,将与各图像处理节点的处理需求信息相似性最高的解析内容信息对应的解析结果作为各图像处理节点的目标解析结果。
作为一个实施例,还包括:
算法调度单元,用于将目标处理算法从图像处理算法库中调度到算法容器中;
图像处理单元,包括:
容器执行模块,用于在算法容器中,基于目标处理算法对待处理图像执行相应的图像改进处理,获得改进后的目标图像。
本实施例提供的装置,可用于执行上述方法实施例的技术方案,其实现原理和技术效果类似,本实施例此处不再赘述。
为了实现上述实施例,本公开实施例还提供了一种电子设备。
参考图8,其示出了适于用来实现本公开实施例的电子设备800的结构示意图,该电子设备800可以为终端设备或服务器。其中,终端设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、个人数字助理(Personal Digital Assistant,简称PDA)、平板电脑(Portable Android Device,简称PAD)、便携式多媒体播放器(Portable MediaPlayer,简称PMP)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图8示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图8所示,电子设备800可以包括处理装置(例如中央处理器、图形处理器等)801,其可以根据存储在只读存储器(Read Only Memory,简称ROM)802中的程序或者从存储装置808加载到随机访问存储器(Random Access Memory,简称RAM)803中的程序而执行各种适当的动作和处理。在RAM 803中,还存储有电子设备800操作所需的各种程序和数据。处理装置801、ROM802以及RAM 803通过总线804彼此相连。输入/输出(I/O)接口805也连接至总线804。
通常,以下装置可以连接至I/O接口805:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置806;包括例如液晶显示器(Liquid CrystalDisplay,简称LCD)、扬声器、振动器等的输出装置807;包括例如磁带、硬盘等的存储装置808;以及通信装置809。通信装置809可以允许电子设备800与其他设备进行无线或有线通信以交换数据。虽然图8示出了具有各种装置的电子设备800,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置809从网络上被下载和安装,或者从存储装置808被安装,或者从ROM 802被安装。在该计算机程序被处理装置801执行时,执行本公开实施例的方法中限定的上述功能。
需要说明的是,本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备执行上述实施例所示的方法。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LocalArea Network,简称LAN)或广域网(Wide Area Network,简称WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的节点可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,节点的名称在某种情况下并不构成对该节点本身的限定,例如,第一获取节点还可以被描述为“获取至少两个网际协议地址的节点”。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如,非限制性地,可以使用的示范类型的硬件逻辑部件包括:现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等等。
在本公开的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
第一方面,根据本公开的一个或多个实施例,提供了一种图像处理方法,包括:
响应于图像处理请求,获得待处理图像;
对待处理图像从至少一个解析维度进行解析,获得待处理图像的至少一个解析结果;
根据至少一个解析结果,为待处理图像选择目标处理算法;
基于目标处理算法对待处理图像执行相应的图像改进处理,获得改进后的目标图像。
根据本公开的一个或多个实施例,对待处理图像从至少一个解析维度进行解析,获得待处理图像的至少一个解析结果,包括:
获取与各解析维度相匹配的图像解析模型;
将待处理图像分别输入各解析维度的图像解析模型进行解析计算,获得待处理图像在至少一个解析维度分别对应的解析结果,得到待处理图像的至少一个解析结果。
根据本公开的一个或多个实施例,根据至少一个解析结果,为待处理图像选择目标处理算法,包括:
确定算法决策树中的至少一个图像处理节点,算法决策树由至少一个图像处理节点按照各节点的算法选择策略建立连接;
从至少一个解析结果中为各图像处理节点选择目标解析结果,获得各图像处理节点对应的目标解析结果;
利用各图像处理节点的目标解析结果,确定算法决策树中满足算法执行条件的目标处理节点;
按照算法选择策略选择目标处理节点的目标处理算法,以获得待处理图像的目标处理算法。
根据本公开的一个或多个实施例,利用各图像处理节点的目标解析结果,确定算法决策树中满足算法执行条件的目标处理节点,包括:
按照自顶向下的顺序,从算法决策树的第一个图像处理节点开始,判断图像处理节点的目标解析结果是否满足算法执行条件;
若确定图像处理节点的目标解析结果满足算法执行条件,则确定图像处理节点为目标处理节点,并在按照算法选择策略选择目标处理节点的目标处理算法之后,进入目标处理算法关联的下一个图像处理节点,继续执行判断图像处理节点的目标解析结果是否满足算法执行条件;
若确定图像处理节点的目标解析结果不满足算法执行条件,则进入图像处理节点关联的下一个图像处理节点,继续执行判断图像处理节点的目标解析结果是否满足算法执行条件;
获取算法决策树遍历结束时得到的目标处理节点。
根据本公开的一个或多个实施例,算法选择策略包括图像处理节点的至少一个数值区间,各数值区间关联图像处理算法或下一个图像处理节点,且各数值区间的图像处理算法关联下一个图像处理节点;
利用各图像处理节点的目标解析结果,确定算法决策树中满足算法执行条件的目标处理节点,包括:
确定各图像处理节点的算法选择策略对应的至少一个数值区间;
从各图像处理节点对应的至少一个数值区间中确定直接关联下一个图像处理节点的第一数值区间;
遍历算法决策树,若任一个图像处理节点的目标解析结果不属于图像处理节点的第一数值区间,则确定图像处理节点为满足算法执行条件的目标处理节点,获得算法决策树汇总的目标处理节点。
根据本公开的一个或多个实施例,按照算法选择策略选择目标处理节点的目标处理算法,包括:
确定算法选择策略对应至少一个数值区间中除第一数值区间之外的第二数值区间;
基于目标处理节点的目标解析结果,从第二数值区间中确定目标解析结果所属的目标数值区间;
将目标数值区间关联的图像处理算法作为目标处理节点的目标处理算法。
根据本公开的一个或多个实施例,图像处理节点包括:图像增强节点;图像增强节点具体包括:分辨率增强节点、降噪节点、亮度增强节点、色彩校正节点中的至少一个;
分辨率增强节点对应的目标解析结果包括:分辨率值;
降噪节点对应的目标解析结果包括:清晰度和噪声评分;
亮度增强节点对应的目标解析结果包括:亮度值;
色彩校正节点对应的目标解析结果包括:色彩评分。
根据本公开的一个或多个实施例,图像处理节点还包括:内容提取节点;内容提取节点对应的目标解析结果包括:人像数量。
根据本公开的一个或多个实施例,图像处理节点还包括:图像修复节点;图像修复节点包括:图像擦除算法、图像扩展算法、图像裁剪算法、人像瘦身算法中的至少一个。
根据本公开的一个或多个实施例,目标处理节点包括至少一个,还包括:
基于至少一个目标处理节点在算法决策树中的位置,确定至少一个目标处理节点分别对应的处理顺序;
基于目标处理算法对待处理图像执行相应的图像处理,获得图像处理结果,包括:
按照至少一个目标处理节点分别对应的处理顺序,顺序执行各目标处理节点的目标处理算法,获得各目标处理节点的节点处理结果,前一个目标处理节点输出的节点处理结果作为后一个目标处理节点的输入;
获得最后一个目标处理节点对应的节点处理结果为图像处理结果。
根据本公开的一个或多个实施例,从至少一个解析结果中为各图像处理节点选择目标解析结果,获得各图像处理节点对应的目标解析结果,包括:
根据各图像处理节点的处理需求信息和至少一个解析结果分别对应的解析内容信息;
根据至少一个解析结果分别对应的解析内容信息,将与各图像处理节点的处理需求信息相似性最高的解析内容信息对应的解析结果作为各图像处理节点的目标解析结果。
根据本公开的一个或多个实施例,根据至少一个解析结果,为待处理图像选择目标处理算法之后,还包括:
将目标处理算法从图像处理算法库中调度到算法容器中;
基于目标处理算法对待处理图像执行相应的图像改进处理,获得改进后的目标图像,包括:
在算法容器中,基于目标处理算法对待处理图像执行相应的图像改进处理,获得改进后的目标图像。
第二方面,根据本公开的一个或多个实施例,提供了图像处理装置,包括:
图像获取单元,用于响应于图像处理请求,获得待处理的待处理图像;
图像解析单元,用于对待处理图像从至少一个解析维度进行解析,获得待处理图像的至少一个解析结果;
算法选择单元,用于根据至少一个解析结果,为待处理图像选择目标处理算法;
图像处理单元,用于基于目标处理算法对待处理图像执行相应的图像处理,获得图像处理结果。
第三方面,根据本公开的一个或多个实施例,提供了一种电子设备,包括:至少一个处理器和存储器;
存储器存储计算机执行指令;
至少一个处理器执行存储器存储的计算机执行指令,使得至少一个处理器执行如上第一方面以及第一方面各种可能的设计的图像处理方法。
第四方面,根据本公开的一个或多个实施例,提供了一种计算机可读存储介质,计算机可读存储介质中存储有计算机执行指令,当处理器执行计算机执行指令时,实现如上第一方面以及第一方面各种可能的设计的图像处理方法。
第五方面,根据本公开的一个或多个实施例,提供了一种计算机程序产品,包括计算机程序,计算机程序被处理器执行时实现如上第一方面以及第一方面各种可能的设计的图像处理方法。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开中所涉及的公开范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述公开构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
此外,虽然采用特定次序描绘了各操作,但是这不应当理解为要求这些操作以所示出的特定次序或以顺序次序执行来执行。在一定环境下,多任务和并行处理可能是有利的。同样地,虽然在上面论述中包含了若干具体实现细节,但是这些不应当被解释为对本公开的范围的限制。在单独的实施例的上下文中描述的某些特征还可以组合地实现在单个实施例中。相反地,在单个实施例的上下文中描述的各种特征也可以单独地或以任何合适的子组合的方式实现在多个实施例中。
尽管已经采用特定于结构特征和/或方法逻辑动作的语言描述了本主题,但是应当理解所附权利要求书中所限定的主题未必局限于上面描述的特定特征或动作。相反,上面所描述的特定特征和动作仅仅是实现权利要求书的示例形式。

Claims (16)

1.一种图像处理方法,其特征在于,包括:
响应于图像处理请求,获得待处理图像;
对所述待处理图像从至少一个解析维度进行解析,获得所述待处理图像的至少一个解析结果;
根据所述至少一个解析结果,为所述待处理图像选择目标处理算法;
基于所述目标处理算法对所述待处理图像执行相应的图像改进处理,获得改进后的目标图像。
2.根据权利要求1所述的方法,其特征在于,所述对所述待处理图像从至少一个解析维度进行解析,获得所述待处理图像的至少一个解析结果,包括:
获取与各解析维度相匹配的图像解析模型;
将所述待处理图像分别输入各解析维度的图像解析模型进行解析计算,获得所述待处理图像在至少一个所述解析维度分别对应的解析结果,得到所述待处理图像的至少一个解析结果。
3.根据权利要求1所述的方法,其特征在于,所述根据所述至少一个解析结果,为所述待处理图像选择目标处理算法,包括:
确定算法决策树中的至少一个图像处理节点,所述算法决策树由至少一个所述图像处理节点按照各节点的算法选择策略建立连接;
从所述至少一个所述解析结果中为各图像处理节点选择目标解析结果,获得各图像处理节点对应的目标解析结果;
利用各图像处理节点的目标解析结果,确定所述算法决策树中满足算法执行条件的目标处理节点;
按照所述算法选择策略选择所述目标处理节点的目标处理算法,以获得所述待处理图像的目标处理算法。
4.根据权利要求3所述的方法,其特征在于,所述利用各图像处理节点的目标解析结果,确定所述算法决策树中满足算法执行条件的目标处理节点,包括:
按照自顶向下的顺序,从所述算法决策树的第一个图像处理节点开始,判断所述图像处理节点的目标解析结果是否满足算法执行条件;
若确定所述图像处理节点的目标解析结果满足算法执行条件,则确定所述图像处理节点为目标处理节点,并在按照所述算法选择策略选择所述目标处理节点的目标处理算法之后,进入所述目标处理算法关联的下一个图像处理节点,继续执行判断所述图像处理节点的目标解析结果是否满足算法执行条件;
若确定所述图像处理节点的目标解析结果不满足算法执行条件,则进入所述图像处理节点关联的下一个图像处理节点,继续执行判断所述图像处理节点的目标解析结果是否满足算法执行条件;
获取所述算法决策树遍历结束时得到的目标处理节点。
5.根据权利要求3所述的方法,其特征在于,所述算法选择策略包括图像处理节点的至少一个数值区间,各数值区间关联图像处理算法或下一个图像处理节点,且各数值区间的图像处理算法关联下一个图像处理节点;
所述利用各图像处理节点的目标解析结果,确定所述算法决策树中满足算法执行条件的目标处理节点,包括:
确定各图像处理节点的算法选择策略对应的至少一个数值区间;
从各图像处理节点对应的至少一个数值区间中确定直接关联下一个图像处理节点的第一数值区间;
遍历所述算法决策树,若任一个图像处理节点的目标解析结果不属于所述图像处理节点的第一数值区间,则确定所述图像处理节点为满足算法执行条件的目标处理节点,获得所述算法决策树汇总的目标处理节点。
6.根据权利要求5所述的方法,其特征在于,所述按照所述算法选择策略选择所述目标处理节点的目标处理算法,包括:
确定所述算法选择策略对应至少一个所述数值区间中除所述第一数值区间之外的第二数值区间;
基于所述目标处理节点的目标解析结果,从所述第二数值区间中确定所述目标解析结果所属的目标数值区间;
将所述目标数值区间关联的图像处理算法作为所述目标处理节点的目标处理算法。
7.根据权利要求3所述的方法,其特征在于,所述图像处理节点包括:图像增强节点;所述图像增强节点具体包括:分辨率增强节点、降噪节点、亮度增强节点、色彩校正节点中的至少一个;
所述分辨率增强节点对应的目标解析结果包括:分辨率值;
所述降噪节点对应的目标解析结果包括:清晰度和噪声评分;
所述亮度增强节点对应的目标解析结果包括:亮度值;
所述色彩校正节点对应的目标解析结果包括:色彩评分。
8.根据权利要求3所述的方法,其特征在于,所述图像处理节点还包括:内容提取节点;所述内容提取节点对应的目标解析结果包括:人像数量。
9.根据权利要求3所述的方法,其特征在于,所述图像处理节点还包括:图像修复节点;所述图像修复节点包括:图像擦除算法、图像扩展算法、图像裁剪算法、人像瘦身算法中的至少一个。
10.根据权利要求3所述的方法,其特征在于,所述目标处理节点包括至少一个,还包括:
基于至少一个所述目标处理节点在所述算法决策树中的位置,确定至少一个所述目标处理节点分别对应的处理顺序;
所述基于所述目标处理算法对所述待处理图像执行相应的图像处理,获得图像处理结果,包括:
按照所述至少一个所述目标处理节点分别对应的处理顺序,顺序执行各目标处理节点的目标处理算法,获得各目标处理节点的节点处理结果,前一个目标处理节点输出的节点处理结果作为后一个目标处理节点的输入;
获得最后一个目标处理节点对应的节点处理结果为所述图像处理结果。
11.根据权利要求3所述的方法,其特征在于,所述从所述至少一个所述解析结果中为各图像处理节点选择目标解析结果,获得各图像处理节点对应的目标解析结果,包括:
根据各图像处理节点的处理需求信息和至少一个所述解析结果分别对应的解析内容信息;
根据至少一个所述解析结果分别对应的解析内容信息,将与各图像处理节点的处理需求信息相似性最高的解析内容信息对应的解析结果作为各图像处理节点的目标解析结果。
12.根据权利要求1所述的方法,其特征在于,所述根据所述至少一个解析结果,为所述待处理图像选择目标处理算法之后,还包括:
将所述目标处理算法从图像处理算法库中调度到算法容器中;
所述基于所述目标处理算法对所述待处理图像执行相应的图像改进处理,获得改进后的目标图像,包括:
在所述算法容器中,基于所述目标处理算法对所述待处理图像执行相应的图像改进处理,获得改进后的目标图像。
13.一种图像处理装置,其特征在于,包括:
图像获取单元,用于响应于图像处理请求,获得待处理的待处理图像;
图像解析单元,用于对所述待处理图像从至少一个解析维度进行解析,获得所述待处理图像的至少一个解析结果;
算法选择单元,用于根据所述至少一个解析结果,为所述待处理图像选择目标处理算法;
图像处理单元,用于基于所述目标处理算法对所述待处理图像执行相应的图像处理,获得图像处理结果。
14.一种电子设备,其特征在于,包括:处理器、存储器;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,使得所述处理器配置有如权利要求1至12任一项所述的图像处理方法。
15.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机执行指令,当处理器执行所述计算机执行指令时,实现如权利要求1至12任一项所述的图像处理方法。
16.一种计算机程序产品,包括计算机程序,其特征在于,所述计算机程序被处理器执行,以配置有如权利要求1至12任一项所述的图像处理方法。
CN202211367028.XA 2022-11-02 2022-11-02 图像处理方法、装置、设备、介质及产品 Pending CN115830362A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202211367028.XA CN115830362A (zh) 2022-11-02 2022-11-02 图像处理方法、装置、设备、介质及产品
PCT/CN2023/129171 WO2024094086A1 (zh) 2022-11-02 2023-11-01 图像处理方法、装置、设备、介质及产品

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211367028.XA CN115830362A (zh) 2022-11-02 2022-11-02 图像处理方法、装置、设备、介质及产品

Publications (1)

Publication Number Publication Date
CN115830362A true CN115830362A (zh) 2023-03-21

Family

ID=85526347

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211367028.XA Pending CN115830362A (zh) 2022-11-02 2022-11-02 图像处理方法、装置、设备、介质及产品

Country Status (2)

Country Link
CN (1) CN115830362A (zh)
WO (1) WO2024094086A1 (zh)

Also Published As

Publication number Publication date
WO2024094086A1 (zh) 2024-05-10

Similar Documents

Publication Publication Date Title
CN111080628B (zh) 图像篡改检测方法、装置、计算机设备和存储介质
US10475186B2 (en) Segmentation of objects in videos using color and depth information
CN108875540B (zh) 图像处理方法、装置和系统及存储介质
US11055516B2 (en) Behavior prediction method, behavior prediction system, and non-transitory recording medium
CN111476309A (zh) 图像处理方法、模型训练方法、装置、设备及可读介质
US11244157B2 (en) Image detection method, apparatus, device and storage medium
US8103058B2 (en) Detecting and tracking objects in digital images
US11216924B2 (en) Method and apparatus for processing image
CN109977832B (zh) 一种图像处理方法、装置及存储介质
CN112181657B (zh) 视频处理方法、装置、电子设备及存储介质
CN110287816B (zh) 车门动作检测方法、装置和计算机可读存储介质
CN111783632B (zh) 针对视频流的人脸检测方法、装置、电子设备及存储介质
CN110689478B (zh) 图像风格化处理方法、装置、电子设备及可读介质
WO2023273515A1 (zh) 目标检测方法、装置、电子设备和存储介质
CN115830362A (zh) 图像处理方法、装置、设备、介质及产品
CN115471413A (zh) 图像处理方法及装置、计算机可读存储介质和电子设备
CN111339367B (zh) 视频处理方法、装置、电子设备及计算机可读存储介质
CN114429641A (zh) 一种时序动作检测方法、装置、存储介质及终端
CN114399696A (zh) 一种目标检测方法、装置、存储介质及电子设备
CN112884866A (zh) 一种黑白视频的上色方法、装置、设备及存储介质
CN111901673B (zh) 一种视频预测方法、装置、存储介质及终端
CN116630354B (zh) 一种视频抠图方法、电子设备、存储介质及程序产品
CN111489769B (zh) 图像处理方法、装置和硬件装置
US20240127406A1 (en) Image quality adjustment method and apparatus, device, and medium
CN108898111B (zh) 一种图像处理方法、电子设备及计算机可读介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination