CN117234391A - 图像生成方法、装置和电子设备 - Google Patents
图像生成方法、装置和电子设备 Download PDFInfo
- Publication number
- CN117234391A CN117234391A CN202311020357.1A CN202311020357A CN117234391A CN 117234391 A CN117234391 A CN 117234391A CN 202311020357 A CN202311020357 A CN 202311020357A CN 117234391 A CN117234391 A CN 117234391A
- Authority
- CN
- China
- Prior art keywords
- image
- node
- nodes
- text
- processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 117
- 230000006870 function Effects 0.000 claims abstract description 185
- 238000012545 processing Methods 0.000 claims abstract description 149
- 230000005540 biological transmission Effects 0.000 claims abstract description 85
- 238000004519 manufacturing process Methods 0.000 claims abstract description 68
- 230000008569 process Effects 0.000 claims abstract description 29
- 238000007781 pre-processing Methods 0.000 claims description 45
- 238000012805 post-processing Methods 0.000 claims description 36
- 238000005520 cutting process Methods 0.000 claims description 21
- 238000009877 rendering Methods 0.000 claims description 16
- 238000003860 storage Methods 0.000 claims description 10
- 230000004044 response Effects 0.000 claims description 8
- 238000013473 artificial intelligence Methods 0.000 description 73
- 230000014509 gene expression Effects 0.000 description 17
- 238000010586 diagram Methods 0.000 description 10
- 238000004891 communication Methods 0.000 description 7
- 230000001960 triggered effect Effects 0.000 description 7
- 238000004364 calculation method Methods 0.000 description 6
- 238000009792 diffusion process Methods 0.000 description 6
- 238000004422 calculation algorithm Methods 0.000 description 5
- 241001465754 Metazoa Species 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000001815 facial effect Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000010923 batch production Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000802 evaporation-induced self-assembly Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000004801 process automation Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Processing Or Creating Images (AREA)
Abstract
本发明提供了一种图像生成方法、装置和电子设备;其中,该方法包括:显示图像编辑页面;图像编辑页面中包括多个功能节点、功能节点之间的运行顺序和功能节点之间的数据传输关系;功能节点关联有实现预设功能的功能函数;功能节点至少包括:图像加载节点和图像调整节点;响应于生成操作,按照运行顺序和数据传输关系,运行多个功能节点;在运行的过程中,通过图像加载节点获取初始图像;通过图像调整节点,对于初始图像进行处理,输出目标处理图像。该方式可以实现自动化的图像生成,生产过程无需人工参与,即可得到满足需求的图像,简化美术资源的生产流程,提高图像生产流程的可复用度,可以适用于大批量的美术资源生产。
Description
技术领域
本发明涉及美术资源生产术领域,尤其是涉及一种图像生成方法、装置和电子设备。
背景技术
在美术资源的生产过程中,往往需要对大批量的图像进行局部图像内容调整,这就需要对图像进行局部重绘。相关技术中,对图像进行局部重绘可以通过AI(ArtificialIntelligence,人工智能)模型实现,但如果要得到满足需求的美术资源,生产环节中需要大量的人工参与,例如,绘制输入至AI模型的蒙版,输入AI模型的文本信息,对AI模型的输出图像进行后处理等,都需要人工实现,美术资源的生产需要消耗大量的人力成本,费时费力,生产效率较低。
发明内容
有鉴于此,本发明的目的在于提供一种图像生成方法、装置和电子设备,以实现自动化的图像生成,生产过程无需人工参与,即可得到满足需求的图像,简化美术资源的生产流程,提高图像生产流程的可复用度,可以适用于大批量的美术资源生产。
第一方面,本发明实施例提供了一种图像生成方法,方法包括:显示图像编辑页面;图像编辑页面中包括多个功能节点、功能节点之间的运行顺序和功能节点之间的数据传输关系;功能节点关联有实现预设功能的功能函数;功能节点至少包括:图像加载节点和图像调整节点;响应于生成操作,按照运行顺序和数据传输关系,运行多个功能节点;在运行的过程中,通过图像加载节点获取初始图像;通过图像调整节点,对于初始图像进行处理,输出目标处理图像。
第二方面,本发明实施例提供了一种图像生成装置,装置包括:页面显示模块,用于显示图像编辑页面;图像编辑页面中包括多个功能节点、功能节点之间的运行顺序和功能节点之间的数据传输关系;功能节点关联有实现预设功能的功能函数;功能节点至少包括:图像加载节点和图像调整节点图像生成模块,用于响应于生成操作,按照运行顺序和数据传输关系,运行多个功能节点;在运行的过程中,通过图像加载节点获取初始图像;通过图像调整节点,对于初始图像进行处理,输出目标处理图像。
第三方面,本发明实施例提供了一种电子设备,包括处理器和存储器,存储器存储有能够被处理器执行的计算机可执行指令,处理器执行计算机可执行指令以实现上述图像生成方法。
第四方面,本发明实施例提供了一种计算机可读存储介质,计算机可读存储介质存储有计算机可执行指令,计算机可执行指令在被处理器调用和执行时,计算机可执行指令促使处理器实现上述图像生成方法。
本发明实施例带来了以下有益效果:
上述图像生成方法、装置和电子设备,显示图像编辑页面;图像编辑页面中包括多个功能节点、功能节点之间的运行顺序和功能节点之间的数据传输关系;功能节点关联有实现预设功能的功能函数;功能节点至少包括:图像加载节点和图像调整节点;响应于生成操作,按照运行顺序和数据传输关系,运行多个功能节点;在运行的过程中,通过图像加载节点获取初始图像;通过图像调整节点,对于初始图像进行处理,输出目标处理图像。
该方式中,图像编辑页面显示多种功能节点,功能节点关联有实现预设功能的功能函数,功能节点还具有运行顺序和数据传输关系,功能节点在运行时,可以实现自动化的图像生成,生产过程无需人工参与,即可得到满足需求的图像,简化了美术资源的生产流程,提高了图像生产流程的可复用度,可以适用于大批量的美术资源生产。
本发明的其他特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
为使本发明的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施方式,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种图像生成方法的流程图;
图2为本发明实施例提供的一种功能节点及其连接关系的示意图;
图3为本发明实施例提供的备选节点显示区域中提供的多种功能节点的示意图;
图4为本发明实施例提供的一种图像编辑页面的示意图;
图5为本发明实施例提供的一种参数设置面板的示意图;
图6为本发明实施例提供的一种节点顺序连线的示意图;
图7为本发明实施例提供的一种数据传输连线的示意图;
图8为本发明实施例提供的一种图像生成装置的结构示意图;
图9为本发明实施例提供的一种电子设备的示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合附图对本发明的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
相关技术中,通过AI绘图对图像进行局部重绘,需要先通过人工绘制蒙版,再通过AI模型输出重绘后的图像;例如,当需要生成多种表情对应的图像时,每次都需要人工更改表情描述词,再将表情描述次输入至AI模型中;对于输入至AI模型的图像,以及AI模型输出的图像,都需要人工进行尺寸、样式的调整,才能得到符合需求的图像,因而需要消耗大量的人力成本,费时费力,生产效率较低。
基于上述问题,本发明实施例提供的一种图像生成方法、装置和电子设备,可以应用于各类美术资源的生产过程中,如2D美术资源、3D美术资源等,具体的,美术资源具体可以包括二维图像、三维模型等。
这里的美术资源可以是二维图像,例如,游戏系统中的图像资源,或其他应用系统中的图像资源。该美术资源也可以是三维模型,例如,角色模型资源、场景模型资源等。
在本公开其中一种实施例中的图像生成方法可以运行于本地终端设备或者是服务器。当图像生成方法运行于服务器时,该方法则可以基于云交互系统来实现与执行,其中,云交互系统包括服务器和客户端设备。
为便于对本实施例进行理解,首先对本发明实施例所公开的一种图像生成方法进行详细介绍,如图1所示,该方法可以应用于前述记载的本地终端设备,也可以为前述记载的客户端设备,本方法包括如下步骤:
步骤S102,显示图像编辑页面;该显示图像编辑页面中包括多个功能节点、功能节点之间的运行顺序和功能节点之间的数据传输关系;功能节点关联有实现预设功能的功能函数;功能节点至少包括:图像加载节点、和图像调整节点;
不同的功能节点用于实现不同的功能,例如,图像获取、图像生成、图像处理、文本处理等功能。功能节点实现对应的功能需要通过功能函数实现,该功能函数可以通过特定的函数语言得到,例如,python函数、C语言函数等。这些功能函数可以加载在本地终端设备上,当运行某个功能节点时,直接从本地调用对应的功能函数即可。功能函数还可以运行在服务器上,当本地终端设备上运行某个功能函数时,本地终端设备与服务器进行通信,使服务器运行对应的功能函数,然后将运行结果方法送至本地终端设备上。
上述功能节点之间的运行顺序,即功能节点在运行过程中,各个功能节点的运行先后顺序;上述功能节点之间的数据传输关系,即功能节点在运行过程中,各个功能节点之间的数据的输入输出关系。
在编辑过程中,可以在各个功能节点之间设置节点顺序连线和数据传输连线。对于节点顺序连线,一种方式中,节点顺序连线可以具有方向性,以表征一条节点顺序连线两端的目标节点的运行顺序,例如,节点顺序连线由节点1指向节点2,则运行顺序为先运行节点1再运行节点2。另一种方式中,可以在目标节点中设置顺序输入端口和顺序输出端口,如果一条节点顺序连线连接节点A的顺序输入端口和节点B的顺序输出端口,则运行顺序为先运行节点B再运行节点A。
对于数据传输连线,一种方式中,数据传输连线也可以具有方向性,以表征一条数据传输连线两端的目标节点的数据传输关系,例如,数据传输连线由节点3指向节点4,则节点3的输出数据输入至节点4。另一种方式中,可以在目标节点中设置数据输入端口和数据输出端口,如果一条数据传输连线连接节点A的数据输入端口和节点B的数据输出端口,则节点B输出的数据输入至节点A。
编辑完毕后,通过前述节点顺序连线可以确定功能节点之间的运行顺序,通过前述数据传输连线可以确定功能节点之间的数据传输关系。
一种实现方式中,为了实现特定的图像处理功能,功能节点至少包括图像加载节点和图像调整节点;其中,图像调整节点可以为文本处理节点、蒙版生成节点、局部绘制节点、图像后处理节点等;不同的功能节点用于实现不同的功能,这些节点之间通过前述运行顺序确定运行先后顺序,通过数据传输关系确定各个功能节点的数据输入输出关系,各个功能节点的功能相结合,得到特定的图像处理功能。
步骤S104,响应于生成操作,按照运行顺序和数据传输关系,运行多个功能节点;在运行的过程中,通过图像加载节点获取初始图像;通过图像调整节点,对于初始图像进行处理,输出目标处理图像。
生成操作可以为作用于图像编辑页面中启动控件的触发操作,也可以为其他快捷键的触发操作。图像调整节点可以为文本处理节点、蒙版生成节点、局部绘制节点、图像后处理节点等;通过文本处理节点获取图像绘制文本信息;通过蒙版生成节点识别初始图像中的指定区域,基于指定区域生成蒙版图像;通过局部绘制节点,基于蒙版图像确定初始图像中的指定区域,基于图像绘制文本信息对指定区域绘制图像,得到中间处理图像;通过图像后处理节点处理中间处理图像,得到并输出目标处理图像;
本实施例中,启动后,运行过程中无需人工干预,各个功能节点即可按照功能节点之间的运行顺序和功能节点之间的数据传输关系自动运行,直至所有的功能节点运行完毕。
另一种方式中,响应于结束运行操作,输出目标处理图像。例如,结束运行操作可以为,作用于图像编辑页面中结束控件的触发操作,也可以为其他快捷键的触发操作。
上述图像加载节点可以提供输入图像的接口,用户通过该接口可以输入字符串形式的路径,或者是用户手动选择弹窗出来的路径,基于该路径从特定的图像库中进行图像的读取,还可以将获取到的图像转换成多维矩阵,供后续节点处理,从而得到前述初始图像。用户可以使用拼接的路径,来加载有规律的图片路径,例如1.png,2.png等这样的有规律文件名。
上述图像调整节点包括下述中的一种或多种:文本处理节点、蒙版生成节点、局部绘制节点和图像后处理节点。
其中,上述文本处理节点可以提供文本输入接口,用于可以输入图像绘制文本信息;该图像绘制文本信息用于描述待生成的图像内容,例如,图像内容为角色表情,具体可以包括喜悦、高兴、害怕等。该图像绘制文本信息用于输入至AI模型,以使该AI模型基于图像绘制文本信息绘制相匹配的图像内容。
上述蒙版生成节点识别初始图像中的指定区域,基于指定区域生成蒙版图像;该蒙版生成节点可以关联指定区域识别模型,蒙版生成模型等AI模型,通过这些AI模型自动生成蒙版图像。
上述局部绘制节点可以关联绘制图像内容的AI模型,将蒙版图像和图像绘制文本信息输入至该AI模型中,通过该AI模型指定区域绘制图像内容,得到中间处理图像。
上述图像后处理节点可以包括抠图节点、尺寸调整节点、亮度调整节点等,具体可以根据实际需求设置,通过图像后处理节点处理中间处理图像,得到最终处理图像;该最终处理图像可以满足用户需求,无需再由人工进行图像处理。
当所有功能节点运行结束后,输出的最终处理图像可以保存在特定路径中。可以设置一个储存图像节点,通过该节点,将最终处理图像进行格式转换、通道合并等操作,然后保存为本地图像。
本实施例的图像生成方法,其实现方式可以是集成为一个插件应用到其他软件中,也可以是独立的应用程序APP,还可以是集成到具体的硬件设备中。该图像生成方法也可以被封装成函数,并设置函数调用接口,通过该函数调用接口控制运行该图像生成方法。
上述图像生成方法,显示图像编辑页面;图像编辑页面中包括多个功能节点、功能节点之间的运行顺序和功能节点之间的数据传输关系;功能节点关联有实现预设功能的功能函数;功能节点至少包括:图像加载节点和图像调整节点;响应于生成操作,按照运行顺序和数据传输关系,运行多个功能节点;在运行的过程中,通过图像加载节点获取初始图像;通过图像调整节点,对于初始图像进行处理,输出目标处理图像。
该方式中,图像编辑页面显示多种功能节点,功能节点关联有实现预设功能的功能函数,功能节点还具有运行顺序和数据传输关系,功能节点在运行时,可以实现自动化的图像生成,生产过程无需人工参与,即可得到满足需求的图像,简化了美术资源的生产流程,提高了图像生产流程的可复用度,可以适用于大批量的美术资源生产。
一种具体的实现方式中,上述目标节点还包括遍历节点;通过遍历节点,按照预设的遍历顺序,遍历图像绘制文本集合中的文本信息,将遍历到的文本信息输入至遍历节点通过数据传输线连接的后续节点中。
例如,该遍历节点可以连接文本集合节点,前述图像绘制文本集合保存在文本集合节点中,按照图像绘制文本集合中文本信息的排列顺序,遍历节点逐一获取图像绘制文本集合中的文本信息;该遍历节点可以通过数据传输线连接文生图节点,将遍历到的文本信息输入至文生图节点中,从而得到该文本信息对应的文本内容所匹配的图像。该方式无需用户每次更改文本数据,从而自动化的批量生成图像。
进一步的,上述目标节点还包括循环节点;通过循环节点,控制至少部分图像调整节点循环执行;图像调整节点每执行一次,输出对应的目标处理图像。
该循环节点可以控制的至少部分图像调整节点,通常为循环节点的后续节点,至少部分图像调整节点的运行顺序在循环节点之后,至少部分图像调整节点直接或间接通过节点顺序连线与循环节点连接;至少部分图像调整节点每执行一次,则输出对应的目标处理图像;循环执行完毕后,输出目标处理图像的数量与循环次数相匹配。
当至少部分图像调整节点需要循环执行时,可以通过上述循环节点进行控制,该循环节点中可以设置循环次数,从而控制至少部分图像调整节点的循环次数;至少部分图像调整节点可以为图像生成节点,例如,图生图节点、文生图节点;还可以为图像处理节点,例如,抠图节点、调整尺寸节点。上述至少部分图像调整节点可以包括多个,例如,循环节点、图生图节点、抠图节点一次通过节点顺序连线连接,此时,循环节点可以控制图生图节点和抠图节点进行循环执行,每次循环过程中,图生图节点和抠图节点均执行一次,然后得到并输出目标处理图像。至少部分图像调整节点在执行过程中所需的文本信息,可以由循环节点提供,也可以通过数据传输线连接其他节点,由该节点提供文本信息。
一个具体实现方式中,遍历节点和循环节点同时存在。从遍历节点中获取当次循环所需的文本信息,将信息输入至图像调整节点中,并执行图像调整节点,得到当次循环对应的目标处理图像;其中,遍历节点每遍历到一个数据,循环节点控制后续目标节点循环执行一次。该后续目标节点为循环节点控制循环的图像调整节点。
图像调整节点通过数据传输线连接遍历节点;遍历节点通过节点顺序连线与循环节点连接;遍历节点遍历到的文本信息输入至图像调整节点,作为当次循环执行时,图像调整节点的输入数据;遍历节点每遍历到一个文本信息,循环节点控制后续图像调整节点循环执行一次。
该方式中,循环节点控制的图像调整节点从遍历节点获取数据;遍历节点从图像绘制文本集合中每获取到一个文本信息,则循环节点控制后续的图像调整节点执行一次,后续图像调整节点从遍历节点中获取文本信息,然后开始执行,输出目标处理图像;直至图像绘制文本集合中的文本信息遍历完毕,则循环节点控制后续图像调整节点停止循环。
上述遍历节点可以用于遍历文本集合、数字集合、图片集合等,该节点提供了批量执行管线的基础,可以通过遍历定义好的文本或数字或图片,自动的多次执行管线流程,得到不同结果。
通过上述遍历节点和循环节点,可以批量生成多张图片,避免人工费时描绘;又由于部分节点可以调用远程的服务端进行图像处理,本地设备运行这些节点的负载较小,对硬件要求低,可通过调用云端服务器来执行AI模型的超运算。
在编辑页面中,可以提供收藏夹功能,用户可以将备选节点显示区域中提供的部分备选节点添加至收藏夹中,例如,将常用的备选节点添加至收藏夹中,以便于后续查找并使用节点。
通过上述遍历节点和循环节点,可以生成不同图像绘制文本信息对应的处理图像,用户一次性输入多种图像绘制文本信息,然后运行功能节点即可得到所有的角色表情对应的图像,从而实现图像的高效批量处理。
上述图像调整节点包括文本处理节点;文本处理节点包括:文本集合获取节点和叠加文本节点;通过文本集合获取节点加载图像内容文本集合;图像内容文本集合中包括:多个图像内容指示文本;图像内容指示文本包括:描述目标图像内容的描述词;例如,图像内容为角色表情时,目标图像内容可以包括开心、生气、委屈、惊喜等。
一个示例中,目标表情的描述词可以为英文描述词,例如,开心的描述词为“((Ahappy face)),a smiling face,happy,the corners of the mouth up”,生气的描述词为“((An angry face)),an angry face,anger”,委屈的描述词为“((A wronged face)),acrying face,sad,the corners of the mouth down”,惊喜的描述词为“((A surprisedface)),a shocked face,surprised,eyes wide”。在前述文本集合中,可以通过分隔符将多个表情指示文本连接起来,组成文本集合,具体可以使用python语言中的join函数。
通过叠加文本节点,从文本集合获取节点中获取图像内容指示文本,将图像内容指示文本和图像质量指示文本进行叠加,得到图像绘制文本信息;其中,图像质量指示文本预先内置在叠加文本节点中;图像质量指示文本用于:描述待生成的处理图像的图像质量。例如,图像质量指示文本可以包括图像像素、图像数据量、图像亮度、颜色对比度等参数的文本。可以理解的是,不同的表情指示文本叠加的图像质量指示文本可以相同,也可以不同。图像质量指示文本可以控制待生成的处理图像的图像质量满足图像质量指示文本中的参数。
上述图像调整节点还包括:图像预处理节点;图像预处理节点预习内置有图像预处理参数;例如,图像预处理参数具体可以包括图像尺寸、图像亮度、颜色、对比度等预处理参数。具体可以根据实际需求进行设置。
通过图像预处理节点,从图像加载节点获取初始图像,基于图像预处理参数对初始图像进行预处理,得到预处理后的初始图像;将预处理后的初始图像输入至局部绘制节点。可以理解的是,图像预处理节点的运行顺序在局部绘制节点之前,且图像预处理节点的数据输出后,输入至局部绘制节点。
一个具体的实现方式中,通过图像预处理节点关联的功能函数,计算初始图像的图像尺寸参数;基于图像尺寸参数和预设的图像尺寸处理参数,调整初始图像的图像尺寸,得到调整后的初始图像。
例如,可以通过Python语言的width,height,shape等内置函数,计算图像的宽度、高度以及通道数,得到上述图像尺寸参数。前述图像尺寸处理参数可以基于后续局部绘制节点关联的AI模型设置,以使输入至该AI模型的图像的尺寸满足AI模型的需求。
例如,如果该AI模型需要输入的图像尺寸是8的倍数,则图像尺寸处理参数可以为8的倍数的相关参数,将图像尺寸参数与8进行整除运算,得到与初始图像的图像尺寸参数最接近,且满足8的倍数的目标图像尺寸,然后将初始图像的图像尺寸调整至该目标图像尺寸。
上述图像调整节点包括蒙版生成节点;蒙版生成节点关联有用于生成蒙版图像的第一AI模型;蒙版生成节点中包括:运行第一AI模型的第一服务端访问接口;
通过蒙版生成节点,从图像加载节点中获取初始图像,通过第一服务端访问接口,将初始图像输入至第一AI模型中,通过第一AI模型识别初始图像中的指定区域,基于指定区域生成蒙版图像;其中,蒙版图像中,指定区域对应的蒙版区域具有第一像素值,指定区域以外的图像区域对应的蒙版区域具有第二像素值。
上述第一AI模型可以通过人工智能实验室AILab提供的通用人脸区域识别算法实现。蒙版生成节点在运行时,通过requests库,读取用户身份信息后,调用远端API(Application Programming Interface,应用程序接口),使用AILab提供的通用人脸区域识别算法进行人脸识别和生产蒙版,返回一个灰度图像,即前述蒙版图像对应的图像。该方式可以实现自动生成蒙版图像,无需再由人工制作蒙版图像。
一个示例中,蒙版图像中,指定区域对应的蒙版区域的第一像素值可以为1,对应白色;指定区域以外的图像区域对应的蒙版区域的第二像素值可以为0,对应黑色。
上述图像调整节点包括局部绘制节点;局部绘制节点关联有用于生成指定图像内容的第二AI模型;局部绘制节点中包括:运行第二AI模型的第二服务端访问接口;从蒙版生成节点获取蒙版图像;从文本处理节点获取图像绘制文本信息;通过第二服务端访问接口,将蒙版图像和图像绘制文本信息输入至第二AI模型中,以通过第二AI模型基于蒙版图像从初始图像中确定指定区域,在指定区域生成图像绘制文本信息对应的图像内容,将图像内容填充至初始图像的指定区域,得到中间处理图像。
上述第二AI模型具体可以为文本到图像的潜在扩散模型。上述局部绘制节点运行时,可以通过requests库,读取用户身份信息后,调用远端第二AI模型所在的服务端的API,经过负载均衡和鉴权后,调用云端的显卡算力,借助文本到图像的潜在扩散模型StableDiffusion的核心推理库,进行图像的局部重绘,返回重绘后的中间处理图像。
上述图像调整节点包括图像后处理节点;图像后处理节点包括:扩充边缘节点;扩充边缘节点内置有扩充参数;通过扩充边缘节点获取初始图像,并确定初始图像的原始尺寸参数;基于原始尺寸参数和扩充参数,确定目标尺寸参数;生成与目标尺寸参数相匹配的基础图像,将初始图像叠加在基础图像之上,得到扩充后的初始图像,将扩充后的初始图像输入至抠图节点。
当图像中的角色触碰到了图像边缘的时候,抠图算法无法精准的抠出角色的,因此先用扩充边缘节点,给原画面扩充一圈像素点,再使用抠图算法就可以把角色扣出,然后再使用裁剪边缘节点将补充的像素点扣掉。
前述扩充参数中包括颜色参数、扩充厚度和扩充方向;扩充厚度的单位是像素,用于确定扩充区域的大小,扩展方向包含四周、向上、向下、向左、向右等。
在上述扩充边缘节点中,输入多维数组格式的中间处理图像,然后计算得到中间处理图像的原始尺寸参数,该原始尺寸参数与扩充参数进行比对,计算出目标尺寸参数,通过Python Image Libraty库构造出目标尺寸参数大小且具有预设颜色的基础图像,然后将中间处理图像叠加到基础图像的指定位置,得到扩充后的中间处理图像,最后将扩充后的中间处理图像转换成多维数组。
上述图像调整节点包括图像后处理节点;图像后处理节点包括:抠图节点;该抠图节点中包括指定图像处理服务端的第三服务端访问接口;通过抠图节点,调用指定图像处理服务端的第三服务端访问接口,通过的第三服务端访问接口,将初始图像发送至指定图像处理服务端,以通过指定图像处理服务端去除初始图像的背景区域,得到背景区域为指定像素值的第一处理图像。
在抠图节点运行过程中,通过requests库,读取用户身份信息后,调用远端指定图像处理服务端的API,经过负载均衡和鉴权后,调用云端的显卡算力,通过PBREM算法,去除中间处理图像的背景区域,返回背景部分透明度为0的图像。其中,PBREM也称为PBRemTools(Precise Background Remover tools),是一个Stable Diffusion web UI扩充功能,可以高精度地从单张图像中移除背景。
上述图像后处理节点还包括:裁剪边缘节点;裁剪边缘节点内置有裁剪参数;得到背景区域为指定像素值的第一处理图像的步骤之后,通过裁剪边缘节点获取抠图节点输出的第一处理图像,并确定第一处理图像的第一尺寸参数;基于第一尺寸参数和裁剪参数,确定第二尺寸参数;按照第二尺寸参数对第一处理图像进行裁剪处理,得到裁剪后的第一处理图像。
上述图像后处理节点读取多维数组格式的第一处理图像,确定第一处理图像的第一尺寸参数后,与裁剪参数进行比对,通过多维数组的切片运算符,取出需要的核心图像区域,通过Python Image Libraty库重新构造出一个全新的图像,即裁剪后的第一处理图像,并转换成多维数组后输出。
图2示出了一种功能节点及其连接关系的示意图,包括多种功能节点,其中,实线代表节点顺序连线,表征功能节点之间的运行顺序;虚线代表数据传输连线,表征节点之间的数据传输关系。可以理解的是,根据具体的图像生成需求,设置的功能节点可以替换为其他功能节点,也可以增加其他功能节点。当功能节点确定后,功能节点之间的运行顺序可以为图2中,通过节点顺序连接所示的运行顺序,当前,也可以为其他运行顺序,在不影响图像生成结果的情况下,节点之间的运行顺序可以变化,也可以有部分功能节点并列运行。
当通过上述功能节点替换图像中的角色表情时,可以基于图像中的角色,以自动化识别角色的面部,可以自动更换不同的描述词,完成丰富的表情自动生产,大幅减少人工操作工作量和成本,效率效果兼得。
需要说明的是,不同的功能节点用于实现不同的功能;实现功能通常需要消耗算力。基于此,可以基于功能节点所需要实现功能的复杂程度和算力需求,将功能简单或算力需求较低的部分功能节点对应的功能在本地终端设备实现,例如,获取图像尺寸节点、文本处理节点等;可以将功能复杂或算力需求较高的部分功能节点对应的功能,通过远程的服务端实现,例如,前述蒙版生成节点、局部绘制节点、图像后处理节点等。
通过该方式,对于算力需求较高的功能节点,通过服务端实现,终端设备只需要提供较低的硬件条件,即可实现本实施例提供的图像生成方法,运行负载较小,对硬件要求较低。
一种具体的实现方式中,显示图像编辑页面;其中,该图像编辑页面中包括:备选节点显示区域和节点编辑区域;备选节点显示区域提供多种功能节点;功能节点关联有实现预设功能的功能函数;
该编辑页面用于编辑生产美术资源所需的功能节点,以及节点之间的关系。该图像编辑页面可以显示在浏览器或应用程序中。备选节点显示区域可以通过列表、格子等形式显示备选的多种功能节点;具体可以显示功能节点的节点名称、节点标识等;通过触发功能节点,可以显示该功能节点的详情页面,在详情页面中可以显示该功能节点的功能、参数、使用方法等信息。
初始状态下,节点编辑区域为空白区域,可以为画布的形式。节点编辑区域用于显示被选中的功能节点。例如,通过拖拽的方式把一个功能节点从备选节点显示区域拖拽至节点编辑区域,则该功能节点被选中,并显示节点编辑区域。再如,通过点击的方式从备选节点显示区域中选中功能节点,然后将该功能节点显示在节点编辑区域。
响应针对备选节点显示区域的节点选择操作,在节点编辑区域显示被选中的目标节点;该目标节点至少包括:图像加载节点、文本处理节点、蒙版生成节点、局部绘制节点和图像后处理节点;
该节点选择操作可以为作用于功能节点的拖拽操作、单击操作、双击操作等;该节点选择操作选中的功能节点,即目标节点。在节点编辑区域中,可以通过指定形状显示该目标节点;在该目标节点中,可以显示目标节点的节点名称、节点符号、节点中各项参数以及可编辑控件等,还可以显示用于连接其他节点的端口等。用户可以在节点编辑区域中编辑目标节点的参数、端口等。在节点编辑区域中,目标节点可以移动显示位置,目标节点的显示区域也可以被放大、缩小等。
响应于连线设置操作,为目标节点设置节点顺序连线和数据传输连线;其中,节点顺序连线用于:指示目标节点之间的运行顺序;数据传输连线用于:指示目标节点之间的数据传输关系;
当节点编辑区域中包括多个目标节点时,为了标识出目标节点在运行过程中,各个目标节点之间的逻辑关系,还需要在节点编辑区域中,设置节点顺序连线和数据传输连线。对于节点顺序连线,一种方式中,节点顺序连线可以具有方向性,以表征一条节点顺序连线两端的目标节点的运行顺序,例如,节点顺序连线由节点1指向节点2,则运行顺序为先运行节点1再运行节点2。另一种方式中,可以在目标节点中设置顺序输入端口和顺序输出端口,如果一条节点顺序连线连接节点A的顺序输入端口和节点B的顺序输出端口,则运行顺序为先运行节点B再运行节点A。
对于数据传输连线,一种方式中,数据传输连线也可以具有方向性,以表征一条数据传输连线两端的目标节点的数据传输关系,例如,数据传输连线由节点3指向节点4,则节点3的输出数据输入至节点4。另一种方式中,可以在目标节点中设置数据输入端口和数据输出端口,如果一条数据传输连线连接节点A的数据输入端口和节点B的数据输出端口,则节点B输出的数据输入至节点A。
节点顺序连线和数据传输连线可以具有不同的连线格式,如实线、虚线,也可以具有不同的连线颜色,例如,绿色、红色、黄色。另外,由于数据可能具有文本数据、图像数据、参数数据等,不同种类的数据对应的数据传输连线也可以具有不同的连线格式。
图3示出了备选节点显示区域中提供的多种功能节点,这些功能节点被选中后,即可作为目标节点。在该示例中,功能节点被划分为文本、数字、AI绘图、GPT、批量操作和图像处理等多类。
其中,在文本类中,包括文本模板节点和叠加文本节点;文本模板节点可以用于设置文本格式,按照该文本格式,在文本模板节点中保存文本数据,或者从其他来源获取文本数据。叠加文本节点,可以将不同来源的多个文本进行拼接,得到拼接文本,叠加文本节点中可以包括文本拼接方式,例如,不同来源的文本的拼接先后顺序等。
在数字类中,随机数节点可以生成随机数;基本运算节点可以提供加、减、乘、除等基本运算功能;最大值节点可以计算多个数据中的最大值数据;最小值节点可以计算多个数据中的最小值数据;比较运算节点,可以对多个数据进行比较,基于比较结果输出对应的结果。
在AI绘图类中,加载模型节点,可以用于加载训练完成的AI模型;图生图节点,可以输入初始图像,通过AI模型对初始图像进行处理,输出满足需求的处理结果图像;文生图节点,可以输入文本,通过AI模型对文本进行处理,输出与文本相匹配的处理结果图像。其中,AI模型可以是运行在其他服务端,本地终端设备可以与AI模型所在的服务端进行通信,从而远程调用AI模型,输出处理结果图像。平铺扩散节点,也可以称为Tiled Diffusion节点,可以用于提高图像的分辨率、绘制图像的细节等。ControlNet模型节点可以用于控制AI模型的模型结构。局部重绘节点,可以对输入的初始图像进行局部重绘,例如,对初始图像中角色面部区域进行重绘,得到其他面部特征的角色;对初始图像中的场景地面区域进行重绘,得到其他地面特征的场景地面等。文本反推节点,可以用于对输入的初始图像进行识别,得到该初始图像的文本信息,例如,如果该初始图像中包含人物、动物、风景等;该初始图像的文本信息包括:人物、动物、风景。
在GPT(Generative Pre-Trained Transformer,生成式预训练Transformer模型)类中,包含GPT节点,可以用于自动化的生成文本、图像、或其他格式文件等。
在批量操作类中,文本集合节点可以用于输入文本集合;数值集合节点可以用于输入数字集合;遍历节点用于按照预设的遍历顺序,遍历预设数据集合中的数据;循环节点用于控制循环节点的后续目标节点循环执行;模型集合节点可以用于输入模型集合,该模型结合中包括多种AI模型。
在图像处理类中,垫图节点可以用于提供处理图像所用的垫图,垫图用于提供处理图像所依据的结构、比例、内容等。抠图节点可以用于通过图像处理软件对初始图像进行抠图,该图像处理软件可以运行在其他服务端,抠图节点通过访问接口访问该服务端,从而通过该图像处理软件对初始图像进行抠图处理,得到抠图结果。AI背景抠图节点可以通过AI模型对初始图像进行背景抠图,从而得到初始图像中的前景图像或背景图像等,该AI模型可以运行在其他服务端,AI背景抠图节点通过访问接口访问该服务端,从而使用该AI模型对初始图像进行抠图,得到抠图结果。获取图片尺寸节点可以对输入的初始图像计算长度、宽度、通道数等。调整尺寸节点可以对输入的图像进行缩小、放大、裁剪等处理,从而调整图像尺寸。扩展边缘节点可以对输入的初始图像增加边缘区域;色相饱和度可以对输入的初始图像调整色相饱和度;图像放大节点,可以对输入的初始图像进行放大;自动识别人脸蒙版节点,可以识别输入的初始图像的人脸区域,并基于该人脸区域的位置,生成对应的蒙版图像。
上述各类功能节点集成了多个软件的图像处理功能,用户通过选取功能节点,即可调用对应的软件实现图像处理功能,可以避免多个软件的输入、输出的多次操作和转化,提高了美术资源处理的操作便捷性。通过操作功能节点,可以避免操作代码,通过节点的选取和连接,即可调用相应功能,并对各个功能进行串联,操作简单易用。
图4示出了一种图像编辑页面的示例。在备选节点显示区域中,显示了可供选择的多种功能节点,例如,抠图节点、调整尺寸节点等等。初始状态下,节点编辑区域为空白状态。
当节点编辑区域中显示有目标节点时,目标节点对应有参数设置面板;参数设置面板显示在节点编辑区域;参数设置面板中包括至少一种参数,以及参数对应的参数值设置控件;响应针对参数值设置控件的参数设置操作,获取目标节点对应的运行参数。
目标节点对应的参数设置面板如图5所示。例如,目标节点为调整尺寸节点时,参数设置面板中可以包括图像宽度、图像长度等尺寸,参数值设置控件可以为数值输入控件;目标节点为图像生成节点时,参数可以包括图像生成模板参数、图像生成数量参数、图像质量参数等,参数值设置控件可以为数值输入控件、模板选择控件、数值选择控件等。可以理解的是,节点对应的功能不同时,参数设置面板中的参数可能不同。
通过触发参数值设置控件,可以获取设置完毕后的各个参数的参数值,目标节点中的各个参数以及参数对应的参数值,组成目标节点的运行参数。
进一步的,上述目标节点设置有顺序输入端和/或顺序输出端;需要说明的是,当目标节点为首个运行的节点时,该目标节点通常仅设置有顺序输出端,当目标节点为最末一个运行的节点时,该目标节点通常仅设置有顺序输入端;当目标节点为处于中间位置的节点时,该目标节点通常设置有顺序输入端和顺序输出端。
响应于目标节点中第一节点的顺序输出端连接第二节点的顺序输入端,确定第一节点和第二节点的运行顺序为:第一节点运行结束后,再运行第二节点。
一种方式中,图像编辑页面中可以提供节点顺序连线的连线控件,触发该连线控件后,再确定需要设置连线的顺序输出端和顺序输入端,即可在这两个端口之间设置连线。另一种方式中,可以触发一个顺序输出端或一个顺序输入端,然后生成连线,以顺序输出端为例,连线的一端连接被触发的顺序输出端,连线的另一端随着触控点或鼠标移动,当移动至一个顺序输入端时,触控点或鼠标被释放,连线完成。
当连线完成时,可以理解为连线两端的目标节点的运行顺序被确定。如前述所述,目标节点中第一节点的顺序输出端连接第二节点的顺序输入端,确定第一节点和第二节点的运行顺序为:第一节点运行结束后,再运行第二节点。
在图6的示例中,out表示顺序输出端,in表示顺序输入端;图6中共有四个目标节点,运行顺序为,目标节点1先运行,然后目标节点2运行,然后目标节点3和目标节点4运行。
对于数据传输连线,一种方式中,目标节点设置有数据输入端和/或数据输出端;可以理解的是,当目标节点无需数据输入时,该目标节点通常仅设置有数据输出端,当目标节点没有数据输出时,该目标节点通常仅设置有数据输入端;当目标节点既有数据输入又有数据输出时,该目标节点通常设置有数据输入端和数据输出端。
响应于目标节点中第三节点的数据输出端连接第四节点的顺序输入端,确定第三节点和第四节点的数据传输关系为:从第三节点输出的数据,输入至第四节点中。
一种方式中,图像编辑页面中可以提供数据传输连线的连线控件,触发该连线控件后,再确定需要设置连线的数据输出端和数据输入端,即可在这两个端口之间设置连线。另一种方式中,可以触发一个数据输出端或一个数据输入端,然后生成连线,以数据输出端为例,连线的一段连接被触发的数据输出端,连线的另一端随着触控点或鼠标移动,当移动至一个数据输入端时,触控点或鼠标被释放,连线完成。
当连线完成时,可以理解为连线两端的目标节点的运行顺序被确定。如前述所述,目标节点中第三节点的数据输出端连接第四节点的顺序输入端,确定第三节点和第四节点的数据传输关系为:从第三节点输出的数据,输入至第四节点中。
在图7的示例中,可以通过文本指示某个端口是数据输入端还是数据输出端,数据传输连线通过虚线的形式显示,以与前述节点顺序连线形成区别。图7中,目标节点1输出文本,输入至目标节点2,目标节点输出图片,输入至目标节点3和目标节点4。
考虑到数据有多种格式,不同格式数据的处理方式不同。在本实施例中,响应于连线设置操作,确定目标连线连接的目标数据输入端和目标数据输出端;确定目标数据输入端和目标数据输出端对应的数据类型相同,确定目标连线设置成功。确定目标数据输入端和目标数据输出端对应的数据类型不同,确定目标连线设置失败,显示目标连线设置失败的提示信息。
通常,目标节点的数据输出端的数据类型,通常与该目标节点的功能相关,如果对应的功能函数输出的是文本,则数据输出端的数据类型就是文本,如果功能函数输出的是图片,则数据输出端的数据类型就是图片。目标节点的数据输入端,通常会将数据输入至目标节点的某个参数中,如果该参数是文本,则该数据输入端的数据类型就是文本,如果该参数是图片,则该数据输入端的数据类型就是图片。
当目标连线的目标数据输入端和目标数据输出端被选中后,则目标连线连接的目标数据输入端和目标数据输出端被确定,此时,判断目标数据输入端和目标数据输出端是否相同,如果相同,则在节点编辑区域显示该目标连线;如果不相同,则不显示该目标连线,即目标连线设置失败,同时可以生成信息弹窗,用于显示目标连线设置失败的提示信息,以提示该目标连线设置失败。
对于设置成功的目标连线,可以基于数据类型,控制显示目标连线;其中,目标连线的显示格式与数据类型相匹配。该显示格式可以是连线颜色,连线的虚实等;例如,数据类型为文本时,目标连线为红色,数据类型为图像时,目标连线为绿色等。
进一步的,上述图像编辑页面中的功能节点、功能节点之间的运行顺序和数据传输关系可以进行保存。保存功能节点、功能节点之间的运行顺序和数据传输关系,生成美术资源生产文件。响应于美术资源生产文件的调用操作,按照运行顺序和数据传输关系,运行多个功能节点。在运行的过程中,通过图像加载节点获取初始图像;通过图像调整节点,对于初始图像进行处理,输出目标处理图像。
例如,图像编辑页面中可以显示有保存控件,点击该保存控件,或者触发其他快捷键,可以保存得到美术资源生产文件。
可以理解的是,美术资源生产文件中通常包括多种功能节点,用于实现不同的功能,例如,图像生成、图像缩放、图像亮度调整等,这些功能节点的功能按照前述运行顺序和数据传输关系串联至一起,得到的美术资源生产文件,即可输出满足特定的美术资源生产需求。
该美术资源生产文件可以以文件或者应用程序的形式保存,也可以作为插件集成在其他软件系统中,该美术资源生产文件也可以进行封装,并提供输入接口和输出接口,从而在不暴露内部结构的前提下,提供完善的美术资源生产功能。
上述美术资源生产文件可以使其他用户复用该文件中的节点,以及节点连接关系,保存得到美术资源生产文件。该美术资源生产文件可以在本地被调用,例如,触发启动该美术资源生产文件后,可以在前述图像编辑页面中显示该文件中包括功能节点、功能节点之间的运行顺序和功能节点之间的数据传输关系;通过执行生成操作,运行该文件中的功能节点,得到目标处理图像。
另一种方式中,该美术资源生产文件还可以发送至其他终端设备上,由其他用户调用。例如,触发启动该美术资源生产文件后,可以在该终端设备的图像编辑页面中显示该文件中包括功能节点、功能节点之间的运行顺序和功能节点之间的数据传输关系;通过执行生成操作,运行该文件中的功能节点,得到目标处理图像。再如,该美术资源生产文件还可以被封装,触发启动该美术资源生产文件后,不显示图像编辑页面,也不显示该文件中包括功能节点、功能节点之间的运行顺序和功能节点之间的数据传输关系,只提供数据输入窗口,以供用户输入该文件运行所需的数据,运行后即可得到目标处理图像。
上述方式中,通过生成美术资源生产文件,可以使功能节点以及功能节点之间的运行顺序和数据传输关系进行复用,其他用户使用该文件时,无需理解文件中的细节,即可快速得到所需的美术资源,减少了沟通成本,提高了美术资源生产效率。
进一步的,本实施例的图像生成方法,其实现方式可以集成为一个插件应用到其他软件中,也可以是独立的应用程序APP,还可以是集成到具体的硬件设备中。该图像生成方法也可以被封装成函数,并设置函数调用接口,通过该函数调用接口控制运行该图像生成方法。
通过本实施例的上述方式大批量替换图像中角色表情时,可以自动识别不同图像中角色的面部位置,自动创建蒙版;并通过开发节点流平台组建成全自动流程的美术资源生产文件,实现了全新的图像自动绘制不同表情的技术流程,让不同的角色,不同的动作,不同的服装都能自动识别面部位置,便于批量制作不同表情,丰富了游戏的角色表情的多样度并大大提高了生产速度。
本实施例提供的图像生成方法,让图像角色表情生产实现了全流程自动化,不再受人力操作打断,只需打开配置好的美术资源生产文件,打开选择需要换表情的图片,点击运行即可自动化使用,无需理解流程细节,减少了沟通成本。自动批量执行美术资源生产文件的管线流程,每次生成无需人工参与,减少了各种软件之间的切换,翻译及输入英文描述词的人工操作,把所有需要人工参与的流程都变成自动化运行,大量节省了人工操作成本,提高了开发效率,同时具备较高的可推广性和复用性。
对应于上述方法实施例,参见图8所示的一种图像生成装置的结构示意图;该装置包括:
页面显示模块80,用于显示图像编辑页面;图像编辑页面中包括多个功能节点、功能节点之间的运行顺序和功能节点之间的数据传输关系;功能节点关联有实现预设功能的功能函数;功能节点至少包括:图像加载节点和图像调整节点;
图像生成模块82,用于响应于生成操作,按照运行顺序和数据传输关系,运行多个功能节点;在运行的过程中,通过图像加载节点获取初始图像;通过图像调整节点,对于初始图像进行处理,输出目标处理图像。
上述图像生成装置,显示图像编辑页面;图像编辑页面中包括多个功能节点、功能节点之间的运行顺序和功能节点之间的数据传输关系;功能节点关联有实现预设功能的功能函数;功能节点至少包括:图像加载节点和图像调整节点;响应于生成操作,按照运行顺序和数据传输关系,运行多个功能节点;在运行的过程中,通过图像加载节点获取初始图像;通过图像调整节点,对于初始图像进行处理,输出目标处理图像。
该方式中,图像编辑页面显示多种功能节点,功能节点关联有实现预设功能的功能函数,功能节点还具有运行顺序和数据传输关系,功能节点在运行时,可以实现自动化的图像生成,生产过程无需人工参与,即可得到满足需求的图像,简化了美术资源的生产流程,提高了图像生产流程的可复用度,可以适用于大批量的美术资源生产。
上述图像调整节点包括下述中的一种或多种:文本处理节点、蒙版生成节点、局部绘制节点和图像后处理节点。
上述功能节点还包括:遍历节点;上述装置还包括遍历模块,用于:通过遍历节点,按照预设的遍历顺序,遍历图像绘制文本集合中的文本信息,将遍历到的文本信息输入至遍历节点通过数据传输线连接的后续节点中。
上述功能节点还包括:循环节点;上述装置还包括循环模块,用于:通过循环节点,控制至少部分图像调整节点循环执行;图像调整节点每执行一次,输出对应的目标处理图像。
上述循环模块,用于:从遍历节点中获取当次循环所需的文本信息,将信息输入至图像调整节点中,并执行图像调整节点,得到当次循环对应的目标处理图像;其中,遍历节点每遍历到一个数据,循环节点控制后续目标节点循环执行一次。
上述图像调整节点包括文本处理节点;文本处理节点包括:文本集合获取节点和叠加文本节点;上述装置还包括文本处理模块,用于:通过文本集合获取节点加载图像内容文本集合;图像内容文本集合中包括:多个图像内容指示文本;图像内容指示文本包括:描述目标图像内容的描述词;通过叠加文本节点,从文本集合获取节点中获取图像内容指示文本,将图像内容指示文本和图像质量指示文本进行叠加,得到图像绘制文本信息;其中,图像质量指示文本预先内置在叠加文本节点中;图像质量指示文本用于:描述待生成的处理图像的图像质量。
上述图像调整节点还包括:图像预处理节点;图像预处理节点预习内置有图像预处理参数;上述装置还包括预处理模块,用于通过图像预处理节点,从图像加载节点获取初始图像,基于图像预处理参数对初始图像进行预处理,得到预处理后的初始图像;将预处理后的初始图像输入至局部绘制节点。
上述预处理模块还用于:通过图像预处理节点关联的功能函数,计算初始图像的图像尺寸参数;基于图像尺寸参数和预设的图像尺寸处理参数,调整初始图像的图像尺寸,得到调整后的初始图像。
上述图像调整节点包括蒙版生成节点;蒙版生成节点关联有用于生成蒙版的第一AI模型;蒙版生成节点中包括:运行第一AI模型的第一服务端访问接口;上述装置还包括蒙版生成模块,用于:通过蒙版生成节点,从图像加载节点中获取初始图像;通过第一服务端访问接口,将初始图像输入至第一AI模型中,通过第一AI模型识别初始图像中的指定区域,基于指定区域生成蒙版图像;其中,蒙版图像中,指定区域对应的蒙版区域具有第一像素值,指定区域以外的图像区域对应的蒙版区域具有第二像素值
上述图像调整节点包括局部绘制节点;局部绘制节点关联有用于生成指定图像内容的第二AI模型;局部绘制节点中包括:运行第二AI模型的第二服务端访问接口;上述装置还包括局部重绘节点,用于:从蒙版生成节点获取蒙版图像;从文本处理节点获取图像绘制文本信息;通过第二服务端访问接口,将蒙版图像和图像绘制文本信息输入至第二AI模型中,以通过第二AI模型基于蒙版图像从初始图像中确定指定区域,在指定区域生成图像绘制文本信息对应的指定图像内容,将指定图像内容填充至初始图像的指定区域,得到中间处理图像。
上述图像调整节点包括图像后处理节点;图像后处理节点包括:抠图节点;图像后处理节点包括:抠图节点;抠图节点中包括指定图像处理服务端的第三服务端访问接口;上述装置还包括抠图模块,用于:通过抠图节点,调用指定图像处理服务端的第三服务端访问接口,通过第三服务端访问接口,将初始图像发送至指定图像处理服务端,以通过指定图像处理服务端去除初始图像的背景区域,得到背景区域为指定像素值的第一处理图像。
上述图像后处理节点包括:扩充边缘节点;扩充边缘节点内置有扩充参数;上述装置还包括扩充边缘节点,用于:通过扩充边缘节点获取初始图像,并确定初始图像的原始尺寸参数;基于原始尺寸参数和扩充参数,确定目标尺寸参数;生成与目标尺寸参数相匹配的基础图像,将初始图像叠加在基础图像之上,得到扩充后的初始图像,将扩充后的初始图像输入至抠图节点。
上述图像后处理节点还包括:裁剪边缘节点;裁剪边缘节点内置有裁剪参数;上述装置包括裁剪模块,用于:通过裁剪边缘节点获取抠图节点输出的第一处理图像,并确定第一处理图像的第一尺寸参数;基于第一尺寸参数和裁剪参数,确定第二尺寸参数;按照第二尺寸参数对第一处理图像进行裁剪处理,得到裁剪后的第一处理图像。
上述图像生成模块,还用于:响应于结束运行操作,输出目标处理图像。
上述装置还包括保存模块,用于保存功能节点、功能节点之间的运行顺序和数据传输关系,生成美术资源生产文件。
上述装置还包括调用模块,用于响应于美术资源生产文件的调用操作,按照运行顺序和数据传输关系,运行多个功能节点。
本实施例还提供一种电子设备,包括处理器和存储器,存储器存储有能够被处理器执行的计算机可执行指令,处理器执行计算机可执行指令以实现上述图像生成方法。该电子设备可以是服务器,也可以是终端设备。
参见图9所示,该电子设备包括处理器100和存储器101,该存储器101存储有能够被处理器100执行的计算机可执行指令,该处理器100执行计算机可执行指令以实现上述图像生成方法。
进一步地,图9所示的电子设备还包括总线102和通信接口103,处理器100、通信接口103和存储器101通过总线102连接。
其中,存储器101可能包含高速随机存取存储器(RAM,Random Access Memory),也可能还包括非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器。通过至少一个通信接口103(可以是有线或者无线)实现该系统网元与至少一个其他网元之间的通信连接,可以使用互联网,广域网,本地网,城域网等。总线102可以是ISA总线、PCI总线或EISA总线等。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示,图9中仅用一个双向箭头表示,但并不表示仅有一根总线或一种类型的总线。
处理器100可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器100中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器100可以是通用处理器,包括中央处理器(Central Processing Unit,简称CPU)、网络处理器(Network Processor,简称NP)等;还可以是数字信号处理器(DigitalSignal Processor,简称DSP)、专用集成电路(Application Specific IntegratedCircuit,简称ASIC)、现场可编程门阵列(Field-Programmable Gate Array,简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器101,处理器100读取存储器101中的信息,结合其硬件完成前述实施例的方法的步骤。
上述电子设备中的处理器,通过执行计算机可执行指令,可以实现上述图像生成方法中的下述操作:
显示图像编辑页面;图像编辑页面中包括多个功能节点、功能节点之间的运行顺序和功能节点之间的数据传输关系;功能节点关联有实现预设功能的功能函数;功能节点至少包括:图像加载节点和图像调整节点;
响应于生成操作,按照运行顺序和数据传输关系,运行多个功能节点;在运行的过程中,通过图像加载节点获取初始图像;通过图像调整节点,对于初始图像进行处理,输出目标处理图像。
图像调整节点包括下述中的一种或多种:文本处理节点、蒙版生成节点、局部绘制节点和图像后处理节点。
功能节点还包括:遍历节点;通过遍历节点,按照预设的遍历顺序,遍历图像绘制文本集合中的文本信息,将遍历到的文本信息输入至遍历节点通过数据传输线连接的后续节点中。
功能节点还包括:循环节点;通过循环节点,控制至少部分图像调整节点循环执行;图像调整节点每执行一次,输出对应的目标处理图像。
从遍历节点中获取当次循环所需的文本信息,将信息输入至图像调整节点中,并执行图像调整节点,得到当次循环对应的目标处理图像;其中,遍历节点每遍历到一个数据,循环节点控制后续目标节点循环执行一次。
图像调整节点包括文本处理节点;文本处理节点包括:文本集合获取节点和叠加文本节点;通过文本集合获取节点加载图像内容文本集合;图像内容文本集合中包括:多个图像内容指示文本;图像内容指示文本包括:描述目标图像内容的描述词;通过叠加文本节点,从文本集合获取节点中获取图像内容指示文本,将图像内容指示文本和图像质量指示文本进行叠加,得到图像绘制文本信息;其中,图像质量指示文本预先内置在叠加文本节点中;图像质量指示文本用于:描述待生成的处理图像的图像质量。
图像调整节点还包括:图像预处理节点;图像预处理节点预习内置有图像预处理参数;通过图像预处理节点,从图像加载节点获取初始图像,基于图像预处理参数对初始图像进行预处理,得到预处理后的初始图像;将预处理后的初始图像输入至局部绘制节点。
通过图像预处理节点关联的功能函数,计算初始图像的图像尺寸参数;基于图像尺寸参数和预设的图像尺寸处理参数,调整初始图像的图像尺寸,得到调整后的初始图像。
图像调整节点包括蒙版生成节点;蒙版生成节点关联有用于生成蒙版的第一AI模型;蒙版生成节点中包括:运行第一AI模型的第一服务端访问接口;通过蒙版生成节点,从图像加载节点中获取初始图像;通过第一服务端访问接口,将初始图像输入至第一AI模型中,通过第一AI模型识别初始图像中的指定区域,基于指定区域生成蒙版图像;其中,蒙版图像中,指定区域对应的蒙版区域具有第一像素值,指定区域以外的图像区域对应的蒙版区域具有第二像素值。
图像调整节点包括局部绘制节点;局部绘制节点关联有用于生成指定图像内容的第二AI模型;局部绘制节点中包括:运行第二AI模型的第二服务端访问接口;从蒙版生成节点获取蒙版图像;从文本处理节点获取图像绘制文本信息;通过第二服务端访问接口,将蒙版图像和图像绘制文本信息输入至第二AI模型中,以通过第二AI模型基于蒙版图像从初始图像中确定指定区域,在指定区域生成图像绘制文本信息对应的指定图像内容,将指定图像内容填充至初始图像的指定区域,得到中间处理图像。
图像调整节点包括图像后处理节点;图像后处理节点包括:抠图节点;抠图节点中包括指定图像处理服务端的第三服务端访问接口;通过抠图节点,调用指定图像处理服务端的第三服务端访问接口,通过第三服务端访问接口,将初始图像发送至指定图像处理服务端,以通过指定图像处理服务端去除初始图像的背景区域,得到背景区域为指定像素值的第一处理图像。
图像后处理节点包括:扩充边缘节点;扩充边缘节点内置有扩充参数;通过扩充边缘节点获取初始图像,并确定初始图像的原始尺寸参数;基于原始尺寸参数和扩充参数,确定目标尺寸参数;生成与目标尺寸参数相匹配的基础图像,将初始图像叠加在基础图像之上,得到扩充后的初始图像,将扩充后的初始图像输入至抠图节点。
图像后处理节点还包括:裁剪边缘节点;裁剪边缘节点内置有裁剪参数;得到背景区域为指定像素值的第一处理图像的步骤之后,通过裁剪边缘节点获取抠图节点输出的第一处理图像,并确定第一处理图像的第一尺寸参数;基于第一尺寸参数和裁剪参数,确定第二尺寸参数;按照第二尺寸参数对第一处理图像进行裁剪处理,得到裁剪后的第一处理图像。
响应于结束运行操作,输出目标处理图像。
保存功能节点、功能节点之间的运行顺序和数据传输关系,生成美术资源生产文件。
响应于美术资源生产文件的调用操作,按照运行顺序和数据传输关系,运行多个功能节点。
上述方式中,图像编辑页面显示多种功能节点,功能节点关联有实现预设功能的功能函数,功能节点还具有运行顺序和数据传输关系,功能节点在运行时,可以实现自动化的图像生成,生产过程无需人工参与,即可得到满足需求的图像,简化了美术资源的生产流程,提高了图像生产流程的可复用度,可以适用于大批量的美术资源生产。
本实施例还提供一种计算机可读存储介质,计算机可读存储介质存储有计算机可执行指令,计算机可执行指令在被处理器调用和执行时,计算机可执行指令促使处理器实现上述图像生成方法。
上述计算机可读存储介质存储中的计算机可执行指令,通过执行该计算机可执行指令,可以实现上述图像生成方法中的下述操作:
显示图像编辑页面;图像编辑页面中包括多个功能节点、功能节点之间的运行顺序和功能节点之间的数据传输关系;功能节点关联有实现预设功能的功能函数;功能节点至少包括:图像加载节点和图像调整节点;
响应于生成操作,按照运行顺序和数据传输关系,运行多个功能节点;在运行的过程中,通过图像加载节点获取初始图像;通过图像调整节点,对于初始图像进行处理,输出目标处理图像。
图像调整节点包括下述中的一种或多种:文本处理节点、蒙版生成节点、局部绘制节点和图像后处理节点。
功能节点还包括:遍历节点;通过遍历节点,按照预设的遍历顺序,遍历图像绘制文本集合中的文本信息,将遍历到的文本信息输入至遍历节点通过数据传输线连接的后续节点中。
功能节点还包括:循环节点;通过循环节点,控制至少部分图像调整节点循环执行;图像调整节点每执行一次,输出对应的目标处理图像。
从遍历节点中获取当次循环所需的文本信息,将信息输入至图像调整节点中,并执行图像调整节点,得到当次循环对应的目标处理图像;其中,遍历节点每遍历到一个数据,循环节点控制后续目标节点循环执行一次。
图像调整节点包括文本处理节点;文本处理节点包括:文本集合获取节点和叠加文本节点;通过文本集合获取节点加载图像内容文本集合;图像内容文本集合中包括:多个图像内容指示文本;图像内容指示文本包括:描述目标图像内容的描述词;通过叠加文本节点,从文本集合获取节点中获取图像内容指示文本,将图像内容指示文本和图像质量指示文本进行叠加,得到图像绘制文本信息;其中,图像质量指示文本预先内置在叠加文本节点中;图像质量指示文本用于:描述待生成的处理图像的图像质量。
图像调整节点还包括:图像预处理节点;图像预处理节点预习内置有图像预处理参数;通过图像预处理节点,从图像加载节点获取初始图像,基于图像预处理参数对初始图像进行预处理,得到预处理后的初始图像;将预处理后的初始图像输入至局部绘制节点。
通过图像预处理节点关联的功能函数,计算初始图像的图像尺寸参数;基于图像尺寸参数和预设的图像尺寸处理参数,调整初始图像的图像尺寸,得到调整后的初始图像。
图像调整节点包括蒙版生成节点;蒙版生成节点关联有用于生成蒙版的第一AI模型;蒙版生成节点中包括:运行第一AI模型的第一服务端访问接口;通过蒙版生成节点,从图像加载节点中获取初始图像;通过第一服务端访问接口,将初始图像输入至第一AI模型中,通过第一AI模型识别初始图像中的指定区域,基于指定区域生成蒙版图像;其中,蒙版图像中,指定区域对应的蒙版区域具有第一像素值,指定区域以外的图像区域对应的蒙版区域具有第二像素值。
图像调整节点包括局部绘制节点;局部绘制节点关联有用于生成指定图像内容的第二AI模型;局部绘制节点中包括:运行第二AI模型的第二服务端访问接口;从蒙版生成节点获取蒙版图像;从文本处理节点获取图像绘制文本信息;通过第二服务端访问接口,将蒙版图像和图像绘制文本信息输入至第二AI模型中,以通过第二AI模型基于蒙版图像从初始图像中确定指定区域,在指定区域生成图像绘制文本信息对应的指定图像内容,将指定图像内容填充至初始图像的指定区域,得到中间处理图像。
图像调整节点包括图像后处理节点;图像后处理节点包括:抠图节点;抠图节点中包括指定图像处理服务端的第三服务端访问接口;通过抠图节点,调用指定图像处理服务端的第三服务端访问接口,通过第三服务端访问接口,将初始图像发送至指定图像处理服务端,以通过指定图像处理服务端去除初始图像的背景区域,得到背景区域为指定像素值的第一处理图像。
图像后处理节点包括:扩充边缘节点;扩充边缘节点内置有扩充参数;通过扩充边缘节点获取初始图像,并确定初始图像的原始尺寸参数;基于原始尺寸参数和扩充参数,确定目标尺寸参数;生成与目标尺寸参数相匹配的基础图像,将初始图像叠加在基础图像之上,得到扩充后的初始图像,将扩充后的初始图像输入至抠图节点。
图像后处理节点还包括:裁剪边缘节点;裁剪边缘节点内置有裁剪参数;得到背景区域为指定像素值的第一处理图像的步骤之后,通过裁剪边缘节点获取抠图节点输出的第一处理图像,并确定第一处理图像的第一尺寸参数;基于第一尺寸参数和裁剪参数,确定第二尺寸参数;按照第二尺寸参数对第一处理图像进行裁剪处理,得到裁剪后的第一处理图像。
响应于结束运行操作,输出目标处理图像。
保存功能节点、功能节点之间的运行顺序和数据传输关系,生成美术资源生产文件。
响应于美术资源生产文件的调用操作,按照运行顺序和数据传输关系,运行多个功能节点。
上述方式中,图像编辑页面显示多种功能节点,功能节点关联有实现预设功能的功能函数,功能节点还具有运行顺序和数据传输关系,功能节点在运行时,可以实现自动化的图像生成,生产过程无需人工参与,即可得到满足需求的图像,简化了美术资源的生产流程,提高了图像生产流程的可复用度,可以适用于大批量的美术资源生产。
本发明实施例所提供的图像生成方法或装置和电子设备的计算机程序产品,包括存储了程序代码的计算机可读存储介质,所述程序代码包括的指令可用于执行前面方法实施例中所述的方法,具体实现可参见方法实施例,在此不再赘述。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统和装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
另外,在本发明实施例的描述中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域技术人员而言,可以具体情况理解上述术语在本发明中的具体含义。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
在本发明的描述中,需要说明的是,术语“中心”、“上”、“下”、“左”、“右”、“竖直”、“水平”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。此外,术语“第一”、“第二”、“第三”仅用于描述目的,而不能理解为指示或暗示相对重要性。
最后应说明的是:以上实施例,仅为本发明的具体实施方式,用以说明本发明的技术方案,而非对其限制,本发明的保护范围并不局限于此,尽管参照前述实施例对本发明进行了详细的说明,本领域技术人员应当理解:任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。
Claims (19)
1.一种图像生成方法,其特征在于,所述方法包括:
显示图像编辑页面;所述图像编辑页面中包括多个功能节点、所述功能节点之间的运行顺序和所述功能节点之间的数据传输关系;所述功能节点关联有实现预设功能的功能函数;所述功能节点至少包括:图像加载节点和图像调整节点;
响应于生成操作,按照所述运行顺序和所述数据传输关系,运行所述多个功能节点;在运行的过程中,通过所述图像加载节点获取初始图像;通过所述图像调整节点,对于所述初始图像进行处理,输出目标处理图像。
2.根据权利要求1所述的方法,其特征在于,所述图像调整节点包括下述中的一种或多种:文本处理节点、蒙版生成节点、局部绘制节点和图像后处理节点。
3.根据权利要求1所述的方法,其特征在于,所述功能节点还包括:遍历节点;所述方法还包括:
通过所述遍历节点,按照预设的遍历顺序,遍历图像绘制文本集合中的文本信息,将遍历到的文本信息输入至所述遍历节点通过数据传输线连接的后续节点中。
4.根据权利要求1所述的方法,其特征在于,所述功能节点还包括:循环节点;所述方法还包括:
通过所述循环节点,控制至少部分所述图像调整节点循环执行;所述图像调整节点每执行一次,输出对应的目标处理图像。
5.根据权利要求4所述的方法,其特征在于,通过所述循环节点,控制至少部分所述图像调整节点循环执行的步骤,包括:
从遍历节点中获取当次循环所需的文本信息,将所述文本信息输入至所述图像调整节点中,并执行所述图像调整节点,得到当次循环对应的目标处理图像;其中,所述遍历节点每遍历到一个数据,所述循环节点控制后续目标节点循环执行一次。
6.根据权利要求1所述的方法,其特征在于,所述图像调整节点包括文本处理节点;所述文本处理节点包括:文本集合获取节点和叠加文本节点;所述方法还包括:
通过所述文本集合获取节点加载图像内容文本集合;所述图像内容文本集合中包括:多个图像内容指示文本;所述图像内容指示文本包括:描述目标图像内容的描述词;
通过所述叠加文本节点,从所述文本集合获取节点中获取所述图像内容指示文本,将所述图像内容指示文本和图像质量指示文本进行叠加,得到图像绘制文本信息;其中,所述图像质量指示文本预先内置在所述叠加文本节点中;所述图像质量指示文本用于:描述待生成的处理图像的图像质量。
7.根据权利要求1所述的方法,其特征在于,所述图像调整节点还包括:图像预处理节点;所述图像预处理节点预习内置有图像预处理参数;所述方法还包括:
通过所述图像预处理节点,从所述图像加载节点获取初始图像,基于所述图像预处理参数对所述初始图像进行预处理,得到预处理后的初始图像;
将所述预处理后的初始图像输入至局部绘制节点。
8.根据权利要求7所述的方法,其特征在于,基于所述图像预处理参数对所述初始图像进行预处理,得到预处理后的初始图像的步骤,包括:
通过所述图像预处理节点关联的功能函数,计算所述初始图像的图像尺寸参数;
基于所述图像尺寸参数和预设的图像尺寸处理参数,调整所述初始图像的图像尺寸,得到调整后的所述初始图像。
9.根据权利要求1所述的方法,其特征在于,所述图像调整节点包括蒙版生成节点;所述蒙版生成节点关联有用于生成蒙版的第一AI模型;所述蒙版生成节点中包括:运行所述第一AI模型的第一服务端访问接口;
所述方法还包括:
通过所述蒙版生成节点,从所述图像加载节点中获取初始图像;
通过所述第一服务端访问接口,将所述初始图像输入至所述第一AI模型中,通过所述第一AI模型识别所述初始图像中的指定区域,基于所述指定区域生成蒙版图像;其中,所述蒙版图像中,所述指定区域对应的蒙版区域具有第一像素值,所述指定区域以外的图像区域对应的蒙版区域具有第二像素值。
10.根据权利要求1所述的方法,其特征在于,所述图像调整节点包括局部绘制节点;所述局部绘制节点关联有用于生成指定图像内容的第二AI模型;所述局部绘制节点中包括:运行所述第二AI模型的第二服务端访问接口;所述方法还包括:
从蒙版生成节点获取蒙版图像;
从文本处理节点获取图像绘制文本信息;
通过所述第二服务端访问接口,将所述蒙版图像和所述图像绘制文本信息输入至所述第二AI模型中,以通过所述第二AI模型基于所述蒙版图像从所述初始图像中确定指定区域,在所述指定区域生成所述图像绘制文本信息对应的指定图像内容,将所述指定图像内容填充至所述初始图像的指定区域,得到中间处理图像。
11.根据权利要求1所述的方法,其特征在于,所述图像调整节点包括图像后处理节点;所述图像后处理节点包括:抠图节点;所述抠图节点中包括指定图像处理服务端的第三服务端访问接口;所述方法还包括:
通过所述抠图节点,调用所述指定图像处理服务端的第三服务端访问接口,通过所述第三服务端访问接口,将所述初始图像发送至所述指定图像处理服务端,以通过所述指定图像处理服务端去除所述初始图像的背景区域,得到所述背景区域为指定像素值的第一处理图像。
12.根据权利要求11所述的方法,其特征在于,所述图像后处理节点包括:扩充边缘节点;所述扩充边缘节点内置有扩充参数;所述通过所述抠图节点,调用所述指定图像处理服务端的第三服务端访问接口的步骤之前,所述方法包括:
通过所述扩充边缘节点获取所述初始图像,并确定所述初始图像的原始尺寸参数;
基于所述原始尺寸参数和所述扩充参数,确定目标尺寸参数;
生成与所述目标尺寸参数相匹配的基础图像,将所述初始图像叠加在所述基础图像之上,得到扩充后的初始图像,将所述扩充后的初始图像输入至所述抠图节点。
13.根据权利要求11所述的方法,其特征在于,所述图像后处理节点还包括:裁剪边缘节点;所述裁剪边缘节点内置有裁剪参数;所述得到所述背景区域为指定像素值的第一处理图像的步骤之后,所述方法还包括:
通过所述裁剪边缘节点获取所述抠图节点输出的第一处理图像,并确定所述第一处理图像的第一尺寸参数;
基于所述第一尺寸参数和所述裁剪参数,确定第二尺寸参数;
按照所述第二尺寸参数对所述第一处理图像进行裁剪处理,得到裁剪后的第一处理图像。
14.根据权利要求1所述的方法,其特征在于,输出所述目标处理图像的步骤,包括:响应于结束运行操作,输出所述目标处理图像。
15.根据权利要求1所述的方法,其特征在于,所述方法还包括:
保存所述功能节点、所述功能节点之间的运行顺序和数据传输关系,生成美术资源生产文件。
16.根据权利要求15所述的方法,其特征在于,保存所述功能节点、所述功能节点之间的运行顺序和数据传输关系,生成美术资源生产文件的步骤之后,所述方法还包括:
响应于所述美术资源生产文件的调用操作,按照所述运行顺序和所述数据传输关系,运行所述多个功能节点。
17.一种图像生成装置,其特征在于,所述装置包括:
页面显示模块,用于显示图像编辑页面;所述图像编辑页面中包括多个功能节点、所述功能节点之间的运行顺序和所述功能节点之间的数据传输关系;所述功能节点关联有实现预设功能的功能函数;所述功能节点至少包括:图像加载节点和图像调整节点;
图像生成模块,用于响应于生成操作,按照所述运行顺序和所述数据传输关系,运行所述多个功能节点;在运行的过程中,通过所述图像加载节点获取初始图像;通过所述图像调整节点,对于所述初始图像进行处理,输出目标处理图像。
18.一种电子设备,其特征在于,包括处理器和存储器,所述存储器存储有能够被所述处理器执行的计算机可执行指令,所述处理器执行所述计算机可执行指令以实现权利要求1-16任一项所述的图像生成方法。
19.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机可执行指令,所述计算机可执行指令在被处理器调用和执行时,所述计算机可执行指令促使所述处理器实现权利要求1-16任一项所述的图像生成方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311020357.1A CN117234391A (zh) | 2023-08-14 | 2023-08-14 | 图像生成方法、装置和电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311020357.1A CN117234391A (zh) | 2023-08-14 | 2023-08-14 | 图像生成方法、装置和电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117234391A true CN117234391A (zh) | 2023-12-15 |
Family
ID=89081547
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311020357.1A Pending CN117234391A (zh) | 2023-08-14 | 2023-08-14 | 图像生成方法、装置和电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117234391A (zh) |
-
2023
- 2023-08-14 CN CN202311020357.1A patent/CN117234391A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11288845B2 (en) | Information processing apparatus for coloring an image, an information processing program for coloring an image, and an information processing method for coloring an image | |
CN112733044B (zh) | 推荐图像处理方法、装置、设备及计算机可读存储介质 | |
CN111694565A (zh) | 数据可视化应用开发方法及系统 | |
US11281742B2 (en) | Interactive and selective coloring of digital vector glyphs | |
US20230386041A1 (en) | Control Method, Device, Equipment and Storage Medium for Interactive Reproduction of Target Object | |
CN109658485B (zh) | 网页动画绘制方法、装置、计算机设备和存储介质 | |
CN111399831A (zh) | 页面的展示方法和装置、存储介质、电子装置 | |
CN115564642B (zh) | 图像变换方法、装置、电子设备、存储介质及程序产品 | |
CN109871205B (zh) | 界面代码调整方法、装置、计算机装置及存储介质 | |
WO2021179751A1 (zh) | 图像处理方法和系统 | |
CN114416068A (zh) | 应用开发平台、微程序生成方法、设备及存储介质 | |
CN113867694A (zh) | 一种智能生成前端代码的方法和系统 | |
CN116610304B (zh) | 页面代码生成方法、装置、设备和存储介质 | |
CN117234391A (zh) | 图像生成方法、装置和电子设备 | |
CN115641397A (zh) | 虚拟形象的合成、展示方法和系统 | |
CN115544311A (zh) | 数据分析方法以及装置 | |
CN106569816B (zh) | 一种渲染方法及装置 | |
CN112486378B (zh) | 图形生成方法、装置、终端及存储介质 | |
KR20220121680A (ko) | 딥러닝 네트워크 구성 방법, 딥러닝 자동화 플랫폼 서비스 시스템 및 이를 위한 컴퓨터 프로그램 | |
CN114449063A (zh) | 一种报文处理方法、装置及设备 | |
CN117234392A (zh) | 美术资源生成方法、装置和电子设备 | |
CN113626022A (zh) | 物模型创建方法、装置、存储介质及电子设备 | |
CN115857906B (zh) | 低代码图表生成的方法、系统、电子设备及介质 | |
CN111580909A (zh) | 图片生成方法、装置、设备和存储介质 | |
CN112418902A (zh) | 基于网页的多媒体合成方法和系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |