CN112051959B - 一种图像绘制过程的生成方法、装置、设备及存储介质 - Google Patents

一种图像绘制过程的生成方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN112051959B
CN112051959B CN202010909045.6A CN202010909045A CN112051959B CN 112051959 B CN112051959 B CN 112051959B CN 202010909045 A CN202010909045 A CN 202010909045A CN 112051959 B CN112051959 B CN 112051959B
Authority
CN
China
Prior art keywords
brush
layer
target
image
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010909045.6A
Other languages
English (en)
Other versions
CN112051959A (zh
Inventor
周财进
胡兴鸿
程熙文
邱博恒
王语嫣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing ByteDance Network Technology Co Ltd
Original Assignee
Beijing ByteDance Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing ByteDance Network Technology Co Ltd filed Critical Beijing ByteDance Network Technology Co Ltd
Priority to CN202010909045.6A priority Critical patent/CN112051959B/zh
Publication of CN112051959A publication Critical patent/CN112051959A/zh
Priority to PCT/CN2021/112184 priority patent/WO2022048421A1/zh
Priority to US18/023,953 priority patent/US20240242401A1/en
Application granted granted Critical
Publication of CN112051959B publication Critical patent/CN112051959B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/20Drawing from basic elements, e.g. lines or circles
    • G06T11/203Drawing of straight lines or curves
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/80Creating or modifying a manually drawn or painted image using a manual input device, e.g. mouse, light pen, direction keys on keyboard
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/761Proximity, similarity or dissimilarity measures

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Engineering & Computer Science (AREA)
  • Computing Systems (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Evolutionary Computation (AREA)
  • Databases & Information Systems (AREA)
  • Artificial Intelligence (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Processing Or Creating Images (AREA)
  • Image Generation (AREA)

Abstract

本公开提供了一种图像绘制过程的生成方法、装置、设备及存储介质,所述方法包括:基于为目标图像设置的第一笔刷图层上的像素采样点的细节参数值,确定所述第一笔刷图层上的笔刷对象的笔刷大小和笔刷位置信息。然后,将所述第一笔刷图层上的笔刷对象存入所述第一笔刷图层对应的笔刷队列中。最终,基于笔刷队列中各个笔刷对象,生成目标图像对应的目标风格图像的绘制过程。本公开基于每个像素采样点的细节参数值,确定对应的笔刷对象的笔刷大小和笔刷位置信息,各个笔刷对象的属性确定彼此独立,提高了笔刷对象的属性的确定效率,进而提高了图像绘制过程的生成效率。

Description

一种图像绘制过程的生成方法、装置、设备及存储介质
技术领域
本公开涉及数据处理领域,尤其涉及一种图像绘制过程的生成方法、装置、设备及存储介质。
背景技术
随着计算机技术的发展,用户对基于计算机技术实现各种功能软件的需求日益增长。其中,如何展示目标图像对应的特定风格图像的绘制过程,以便用户能够基于绘制过程学习图像的绘制方式,达到寓教于乐的目的,目前被广泛关注。
由于图像绘制过程的生成,需要确定绘制图像涉及的笔刷对象的大小、位置等属性,而目前确定笔刷对象的属性是通过为绘制图像涉及的所有笔刷对象建立数学模型,同时将各个笔刷对象的属性作为该数学模型的变量的方式,将确定笔刷对象的属性问题转化为对上述数学模型求解最优解的数学问题。
由于绘制图像涉及到的笔刷对象通常数量较多,且对数学模型求解最优解问题本身对性能消耗较高,因此,基于上述方式确定绘制图像涉及的笔刷对象的属性显然效率较低,进一步的导致了基于笔刷对象的属性生成图像绘制过程的效率较低、耗时较长。
发明内容
为了解决上述技术问题或者至少部分地解决上述技术问题,本公开提供了一种图像绘制过程的生成方法、装置、设备及存储介质,能够提高图像绘制过程的生成效率,减少耗时。
本公开提供了一种图像绘制过程的生成方法,所述方法包括:
基于为目标图像设置的第一笔刷图层上的像素采样点的细节参数值,确定所述第一笔刷图层上的笔刷对象的笔刷大小和笔刷位置信息;
将所述第一笔刷图层上的笔刷对象存入所述第一笔刷图层对应的笔刷队列中;
基于所述笔刷队列中的笔刷对象,生成所述目标图像对应的目标风格图像的绘制过程。
一种可选的实施方式中,所述基于为目标图像设置的第一笔刷图层上的像素采样点的细节参数值,确定所述第一笔刷图层上的笔刷对象的笔刷大小和笔刷位置信息,包括:
在为目标图像设置的第一笔刷图层上,确定至少一个目标绘制区域;
基于所述目标绘制区域内的像素采样点的细节参数值,确定所述目标绘制区域内的笔刷对象的笔刷大小和笔刷位置信息;
相应的,所述将所述第一笔刷图层上的笔刷对象存入所述第一笔刷图层对应的笔刷队列中,包括:
基于所述第一笔刷图层上的所述至少一个目标绘制区域的绘制顺序,依次将各个目标绘制区域内的笔刷对象存入所述第一笔刷图层对应的笔刷队列中。
一种可选的实施方式中,所述基于为目标图像设置的第一笔刷图层上的像素采样点的细节参数值,确定所述第一笔刷图层上的笔刷对象的笔刷大小和笔刷位置信息,包括:
基于预设笔刷间隔值,对第一笔刷图层上的像素点进行均匀采样,得到所述第一笔刷图层上的像素采样点;
计算所述像素采样点的细节参数值,并判断所述细节参数值是否处于所述预设笔刷间隔值对应的细节范围;其中,所述细节参数值用于表示所述像素采样点的细节丰富程度;
如果所述细节参数值处于所述预设笔刷间隔值对应的细节范围,则基于所述像素采样点的位置信息确定笔刷对象的笔刷位置信息,以及将所述预设笔刷间隔值对应的笔刷尺寸确定为所述笔刷对象的笔刷大小。
一种可选的实施方式中,所述计算所述像素采样点的细节参数值,包括:
计算所述像素采样点分别在坐标轴的水平方向和竖直方向的梯度值;
基于所述水平方向和竖直方向的梯度值,构建所述像素采样点对应的结构张量矩阵;
对所述结构张量矩阵进行特征值分解后,得到两个特征值;其中,所述两个特征值中较大的特征值用于表示所述像素采样点的细节丰富程度;
将所述两个特征值中较大的特征值,确定为所述像素采样点的细节参数值。
一种可选的实施方式中,所述笔刷对象的属性还包括笔刷方向;所述对所述结构张量矩阵进行特征值分解后,得到两个特征值之后,且将所述第一笔刷图层上的笔刷对象存入所述第一笔刷图层对应的笔刷队列中之前,还包括:
确定所述两个特征值中较小的特征值对应的方向向量;
基于所述方向向量,确定所述像素采样点对应的笔刷对象的笔刷方向。
一种可选的实施方式中,所述基于所述第一笔刷图层上的所述至少一个目标绘制区域的绘制顺序,依次将各个目标绘制区域内的笔刷对象存入所述第一笔刷图层对应的笔刷队列中之前,还包括:
将所述目标绘制区域内的笔刷对象的绘制顺序进行随机打乱处理。
一种可选的实施方式中,所述笔刷对象的属性还包括笔刷颜色;所述笔刷颜色为基于所述目标图像上与所述笔刷对象的笔刷位置信息对应的像素点的颜色值确定的。
一种可选的实施方式中,所述基于所述笔刷队列中的笔刷对象,生成所述目标图像对应的目标风格图像的绘制过程之前,还包括:
确定为所述目标图像设置的第二笔刷图层上的笔刷对象的属性;其中,所述笔刷对象的属性包括基于预设笔刷尺寸确定的笔刷大小;
将所述第二笔刷图层上的各个笔刷对象存入所述第二笔刷图层对应的笔刷队列中;
相应的,所述基于所述笔刷队列中的笔刷对象,生成所述目标图像对应的目标风格图像的绘制过程,包括:
为所述第一笔刷图层和所述第二笔刷图层设置绘制顺序;
根据所述绘制顺序,分别基于所述第一笔刷图层和所述第二笔刷图层对应的笔刷队列中各个笔刷对象的属性,在画布上绘制笔刷,生成所述目标图像对应的目标风格图像的绘制过程。
一种可选的实施方式中,所述确定为所述目标图像设置第二笔刷图层上的笔刷对象的属性;其中,所述笔刷对象的属性包括基于预设笔刷尺寸确定的笔刷大小,包括:
基于预设笔刷间隔值,对所述第二笔刷图层上的像素点进行均匀采样,得到所述第二笔刷图层上的像素采样点;
将所述像素采样点的位置信息确定为所述第二笔刷图层上的笔刷对象的笔刷位置信息,以及,将所述预设笔刷间隔值对应的预设笔刷尺寸确定为所述笔刷对象的笔刷大小。
一种可选的实施方式中,所述基于所述笔刷队列中的笔刷对象,生成所述目标图像对应的目标风格图像的绘制过程之前,还包括:
如果检测到所述目标图像上存在人脸,则基于所述目标图像上的人脸区域,为所述目标图像设置人脸笔刷图层;
基于所述人脸区域的面积,确定所述人脸笔刷图层上的笔刷对象的笔刷大小;其中,所述笔刷对象的属性包括所述笔刷大小、笔刷位置信息、笔刷方向和笔刷颜色;
将所述人脸笔刷图层上的各个笔刷对象存入所述人脸笔刷图层对应的笔刷队列中;
相应的,所述基于所述笔刷队列中的笔刷对象,生成所述目标图像对应的目标风格图像的绘制过程,包括:
为所述第一笔刷图层和所述人脸笔刷图层设置绘制顺序;
根据所述绘制顺序,分别基于所述第一笔刷图层和所述人脸笔刷图层对应的笔刷队列中各个笔刷对象的属性,在画布上绘制笔刷,生成所述目标图像对应的目标风格图像的绘制过程。
一种可选的实施方式中,所述在为所述目标图像设置的第一笔刷图层上,确定至少一个目标绘制区域,包括:
基于目标图像上各个像素点之间的颜色值相似度,在为所述目标图像设置的第一笔刷图层上,确定至少一个目标绘制区域。
一种可选的实施方式中,所述基于所述笔刷队列中的笔刷对象,生成所述目标图像对应的目标风格图像的绘制过程之后,还包括:
在生成所述目标图像对应的目标风格图像之后,为所述目标风格图像添加凹凸纹理效果。
第二方面,本公开提供了一种图像绘制过程的生成装置,所述装置包括:
第一确定模块,用于基于为目标图像设置的第一笔刷图层上的像素采样点的细节参数值,确定所述第一笔刷图层上的笔刷对象的笔刷大小和笔刷位置信息;
第一存入模块,用于将所述第一笔刷图层上的笔刷对象存入所述第一笔刷图层对应的笔刷队列中;
生成模块,用于基于所述笔刷队列中的笔刷对象,生成所述目标图像对应的目标风格图像的绘制过程。
第三方面,本公开提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当所述指令在终端设备上运行时,使得所述终端设备实现上述的方法。
第四方面,本公开提供了一种设备,包括:存储器,处理器,及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时,实现上述的方法。
本公开实施例提供的技术方案与现有技术相比具有如下优点:
本公开实施例提供了一种图像绘制过程的生成方法,具体的,首先,基于为目标图像设置的第一笔刷图层上的像素采样点的细节参数值,确定所述第一笔刷图层上的笔刷对象的笔刷大小和笔刷位置信息。然后,将所述第一笔刷图层上的笔刷对象存入所述第一笔刷图层对应的笔刷队列中。最终,基于笔刷队列中各个笔刷对象,生成目标图像对应的目标风格图像的绘制过程。本公开基于每个像素采样点的细节参数值,确定对应的笔刷对象的笔刷大小和笔刷位置信息,各个笔刷对象的属性确定彼此独立,无需转化为复杂的数学模型求解最优解的数学问题,一定程度上提高了笔刷对象的属性的确定效率,进而提高了基于笔刷对象的属性生成图像绘制过程的效率。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
为了更清楚地说明本公开实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本公开实施例提供的一种图像绘制过程的生成方法的流程图;
图2为本公开实施例提供的另一种图像绘制过程的生成方法的流程图;
图3为本公开实施例提供的一种不同难度系数对应的图像绘制过程的生成模式的选择界面示意图;
图4为本公开实施例提供的另一种图像绘制过程的生成方法的流程图;
图5为本公开实施例提供的又一种图像绘制过程的生成方法的流程图;
图6为本公开实施例提供的一种图像绘制过程的生成装置的结构框图;
图7为本公开实施例提供的一种图像绘制过程的生成设备的结构框图。
具体实施方式
为了能够更清楚地理解本公开的上述目的、特征和优点,下面将对本公开的方案进行进一步描述。需要说明的是,在不冲突的情况下,本公开的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本公开,但本公开还可以采用其他不同于在此描述的方式来实施;显然,说明书中的实施例只是本公开的一部分实施例,而不是全部的实施例。
对图像的绘制过程进行展示,使得用户在观看绘制过程的同时,学习到图像的绘制方式,一定程度上能够达到寓教于乐的目的。
为此,本公开提供了一种图像绘制过程的生成方法,首先,基于为目标图像设置的第一笔刷图层上的像素采样点的细节参数值,确定所述第一笔刷图层上的笔刷对象的笔刷大小和笔刷位置信息。然后,将所述第一笔刷图层上的笔刷对象存入所述第一笔刷图层对应的笔刷队列中。最终,基于笔刷队列中的笔刷对象,生成目标图像对应的目标风格图像的绘制过程。
本公开基于像素采样点的细节参数值,确定笔刷对象的笔刷大小和笔刷位置信息,由于各个笔刷对象的属性确定彼此独立,无需转化为复杂的数学模型求解最优解的数学问题,一定程度上提高了笔刷对象的属性的确定效率,最终提高了图像绘制过程的生成效率。
基于此,本公开实施例提供了一种图像绘制过程的生成方法,参考图1,为本公开实施例提供的一种图像绘制过程的生成方法的流程图,该方法包括:
S101:基于为目标图像设置的第一笔刷图层上的像素采样点的细节参数值,确定所述第一笔刷图层上的笔刷对象的笔刷大小和笔刷位置信息。
本公开实施例中,在生成图像绘制过程之前,首先确定目标图像,其中,目标图像可以为各种类型的图像,例如目标图像可以为人物图像、风景图像等。
一种可选的实施方式中,可以由用户确定目标图像,具体包括,可以从终端相册中选择任意一张图像作为目标图像,也可以通过触发拍照功能,将拍照所得图像作为目标图像。具体的目标图像的确定方式本公开实施例不做限制。
在确定目标图像之后,基于该目标图像生成对应的图像绘制过程。具体为,生成该目标图像对应的目标风格图像的绘制过程,其中,目标风格图像是指具有艺术效果的图像类型,如油画风格图像、素描风格图像等。
实际应用中,在确定目标图像之后,为该目标图像设置第一笔刷图层,通过绘制第一笔刷图层上的笔刷对象,实现对目标图像的目标风格图像的绘制过程。
本公开实施例中,在为目标图像设置第一笔刷图层之后,基于预设笔刷间隔值对第一笔刷图层上的像素点进行采样,然后基于每个像素采样点的细节参数值,确定第一笔刷图层上的笔刷对象的笔刷大小和笔刷位置信息;其中,所述细节参数值用于表示该像素采样点的细节丰富程度。笔刷间隔值是指相邻笔刷之间的距离。
本公开实施例中,在确定第一笔刷图层上的像素采样点之后,计算每个像素采样点的细节参数值,然后判断细节参数值是否处于该用于采样的预设笔刷间隔值对应的细节范围,如果是,则将该像素采样点的位置信息确定为笔刷对象的笔刷位置信息,以及将所述预设笔刷间隔值对应的笔刷尺寸确定为该笔刷对象的笔刷大小。具体的实现方式在后续实施例中进行具体介绍,在此不再赘述。
S102:将所述第一笔刷图层上的笔刷对象存入所述第一笔刷图层对应的笔刷队列中。
本公开实施例中,为目标图像的第一笔刷图层预先创建笔刷队列,在确定第一笔刷图层上的各个笔刷对象以及各个笔刷对应的笔刷位置信息和笔刷大小等属性之后,将各个笔刷对象存入第一笔刷图层对应的笔刷队列中,用于生成目标对象对应的目标风格图像的绘制过程。
S103:基于所述笔刷队列中的笔刷对象,生成所述目标图像对应的目标风格图像的绘制过程。
本公开实施例中,基于笔刷队列中的各个笔刷对象的属性,在画布上绘制笔刷,从而生成对目标图像对应的目标风格图像的绘制过程。其中,目标风格图像可以为油画风格图像、卡通风格图像、素描风格图像等。其中,画布是指用于图像绘制界面上用于绘制笔刷的区域。
实际应用中,第一笔刷图层对应的笔刷队列中的笔刷对象依次出队,并基于依次出队的笔刷对象的属性在画布上进行笔刷的绘制。
本公开实施例中,基于对该笔刷队列中各个笔刷对象的绘制过程,生成目标图像对应的目标风格图像的绘制过程。其中,生成的目标风格图像的绘制过程是指对目标图像对应的目标风格图像如油画风格图像的绘制过程,用户在观看该图像绘制过程的同时,可以学习到图像的绘制方式,一定程度上能够达到寓教于乐的目的。
一种可选的实施方式中,生成的图像绘制过程可以是图像绘制视频的形式。具体的,基于所述第一笔刷图层对应的笔刷队列中各个笔刷对象的属性,对所述第一笔刷图层上的各个笔刷对象进行绘制,生成所述目标图像对应的目标风格图像的绘制视频,以便用户能够通过观看绘制视频,实现对图像绘制方式的学习。
本公开实施例提供的图像绘制过程的生成方法中,首先,基于为目标图像设置的第一笔刷图层上的像素采样点的细节参数值,确定所述第一笔刷图层上的笔刷对象的笔刷大小和笔刷位置信息。然后,将所述第一笔刷图层上的笔刷对象存入所述第一笔刷图层对应的笔刷队列中。最后,基于所述笔刷队列中的笔刷对象,生成所述目标图像对应的目标风格图像的绘制过程。本公开基于每个像素采样点的细节参数值,确定对应的笔刷对象的笔刷大小和笔刷位置信息,各个笔刷对象的属性确定彼此独立,无需转化为复杂的数学模型求解最优解的数学问题,一定程度上提高了笔刷对象的属性的确定效率,进而提高了基于笔刷对象的属性生成图像绘制过程的效率。
为了更贴近于真实的图像绘制过程,本公开实施例还提供了一种图像绘制过程的生成方法,参考图2,为本公开实施例提供的另一种图像绘制过程的生成方法流程图,该方法包括:
S201:在为目标图像设置的第一笔刷图层上,确定至少一个目标绘制区域。
由于实际图像绘制的过程中,用户通常是逐块区域进行绘制的,即先通过笔刷绘制完成其中一块区域,然后再开启对另一块区域的绘制。为了更贴近于真实的图像绘制过程,本公开实施例在设置第一笔刷图层后,在第一笔刷图层上确定至少一个目标绘制区域,以便以目标绘制区域为绘制单元,逐块区域的对目标图像的第一笔刷图层进行绘制。
一种可选的实施方式中,可以将目标图像划分为若干区域,并将各个区域确定为第一笔刷图层的目标绘制区域。
另一种可选的实施方式中,可以基于目标图像上各个像素点之间的颜色值相似度,在为目标图像设置的第一笔刷图层上,确定至少一个目标绘制区域。
具体的,计算目标图像上相邻像素点之间的颜色值相似度,将颜色值相似度大于预设相似阈值的若干相邻像素点构成的区域,确定为第一笔刷图层上的目标绘制区域。本公开实施例以颜色值相似度作为目标绘制区域的划分标准,一定程度上能够更贴近于真实场景中的图像绘制过程。
S202:基于所述目标绘制区域内的像素采样点的细节参数值,确定所述目标绘制区域内的笔刷对象的笔刷大小和笔刷位置信息。
本公开实施例中,对目标绘制区域内的像素点进行采样,基于每个像素采样点的细节参数值,确定该目标绘制区域内的笔刷对象的笔刷大小和笔刷位置信息;其中,所述细节参数值用于表示该像素采样点的细节丰富程度。
本公开实施例中,在确定第一笔刷图层上的目标绘制区域之后,针对每一个目标绘制区域,对目标绘制区域内的像素点进行采样,然后基于每个像素采样点的细节参数值,确定该目标绘制区域内的笔刷对象以及该笔刷对象的属性,其中,笔刷对象的属性至少包括笔刷大小和笔刷位置信息。其中,笔刷大小是指笔刷对象对应的笔刷的尺寸,如大笔刷、中笔刷、小笔刷等。笔刷位置信息是指笔刷对象对应的笔刷的绘制位置,其中,笔刷位置信息可以为二维坐标值。具体的,对于每个像素采样点的细节参数值的计算方式在后续实施例中进行介绍。
一种可选的实施方式中,可以预先设置若干个笔刷尺寸,例如预先设置大、中、小三个笔刷尺寸,针对每个笔刷尺寸,预先设置对应的笔刷间隔值,其中,笔刷间隔值是指相邻笔刷之间的距离。也就是说,预先设置笔刷尺寸与笔刷间隔值之间的对应关系。其中,笔刷尺寸越大,对应的笔刷间隔值越大,相反的,笔刷尺寸越小,对应的笔刷间隔值越小。
实际应用中,可以生成不同难度的图像绘制过程,以便于不同基础的用户能够基于不同难度的图像绘制过程学习图像的绘制方式。为此,本公开实施例可以通过设置笔刷尺寸的数量,控制生成不同难度的图像绘制视频。例如,通过设置大中小三个笔刷尺寸,控制生成难度系数低的图像绘制过程,适合基础较弱的用户学习图像的绘制方式,而通过设置不同尺寸的五个笔刷尺寸,控制生成难度系数高的图像绘制过程,适合基础较强的用户学习图像的绘制方式。用户可以基于需求选择难度系数,从而生成对应难度系数的图像绘制过程。
参考图3,为本公开实施例提供的一种不同难度系数对应的图像绘制过程的生成模式的选择界面示意图,其中,可以包括新手模式、中阶模式和高手模式,不同的模式对应生成不同难度系数的图像绘制过程。
另外,由于图像中细节丰富程度较高的位置,绘制的精细程度越高,因此通常采用尺寸较小的笔刷对其进行绘制。为此,本公开实施例预先设置笔刷尺寸与细节范围的对应关系,其中,细节范围用于表示一定数值范围内的细节参数值,细节范围对应的细节参数值越大,说明细节丰富程度越高,对应设置的笔刷尺寸越小。由于笔刷尺寸与笔刷间隔值也具有对应关系,因此,笔刷间隔值与细节范围也存在对应关系,通常,细节范围对应的细节参数值越大,该细节范围对应的笔刷尺寸越小,对应的笔刷间隔值越小。
在完成上述设置过程之后,针对每个笔刷尺寸,基于该笔刷尺寸对应的笔刷间隔值,对目标绘制区域内的像素点进行均匀采样,得到该目标绘制区域内的像素采样点。然后,计算各个像素采样点的细节参数值,具体的,细节参数值用于表示对应的像素采样点的细节丰富程度。其次,判断该细节参数值是否处于该笔刷间隔值对应的细节范围。如果该细节参数值处于该细节范围,则说明利用该笔刷间隔值对应的笔刷尺寸,即可以满足对该像素采样点位置的细节绘制,此时可以将该像素采样点的位置信息确定为笔刷对象的笔刷位置信息,以及将该笔刷间隔值对应的笔刷尺寸,确定为该笔刷对象的笔刷大小,并将确定了笔刷位置信息和笔刷大小的属性的笔刷对象进行存储。
如果该细节参数值不处于该细节范围,则说明利用该笔刷间隔值对应的笔刷尺寸,不适合对该像素采样点位置的细节进行绘制,此时不需要基于该像素采样点确定笔刷对象的属性。因此,可以理解的是,基于该笔刷间隔值对目标绘制区域内的像素点进行均匀采样后,确定出的笔刷对象的位置并不是均匀的,而是基于对应位置的细节丰富程度确定的笔刷位置信息。
基于上述方式,能够确定出基于各个笔刷间隔值分别采样后得到的笔刷对象的笔刷位置信息和笔刷大小等属性,进而将确定出的各个笔刷对象,作为第一笔刷图层上的该目标绘制区域内的笔刷对象。可以理解的是,同一目标绘制区域内可以包括各种笔刷尺寸的笔刷对象,为了更贴近于真实的图像绘制过程,可以将同一笔刷尺寸的笔刷对象的绘制顺序随机打乱,以便于实现在同一目标绘制区域内先后绘制的笔刷之间是无规律且随机的,更符合真实的图像绘制过程。
本公开实施例中,基于上述方式,能够确定出第一笔刷图层上的各个目标绘制区域内的笔刷对象的笔刷大小和笔刷位置信息,进而完成第一笔刷图层上的笔刷对象的笔刷大小和笔刷位置信息的确定。
S203:基于所述第一笔刷图层上的所述至少一个目标绘制区域的绘制顺序,依次将各个目标绘制区域内的笔刷对象存入所述第一笔刷图层对应的笔刷队列中。
本公开实施例中,为第一笔刷图层建立笔刷队列,然后将各个目标绘制区域内的各个笔刷对象存入第一笔刷图层对应的笔刷队列中;其中,所述笔刷对象的属性包括所述笔刷大小和所述笔刷位置信息。
实际应用中,由于队列具有先进先出的特性,因此,各个笔刷对象存入笔刷队列的顺序,一定程度上决定了该笔刷队列中的笔刷对象的绘制顺序。本公开实施例中,在确定第一笔刷图层上的任意一个目标绘制区域内的笔刷对象的属性之后,可以将该目标绘制区域内的笔刷对象,按照笔刷尺寸由大到小的顺序,将各个笔刷对象存入第一笔刷图层对应的笔刷队列中,以便在对第一笔刷图层进行绘制时,可以实现先画大笔刷、再画中笔刷,最后画小笔刷的由大到小的笔刷绘制方式,以最大程度的贴近真实场景中图像的绘制过程,提高用户的真实体验。
实际应用中,预先设置第一笔刷图层上各个目标绘制区域的绘制顺序,然后基于该绘制顺序,依次将各个目标绘制区域内的笔刷对象存入第一笔刷图层对应的笔刷队列中。
一种可选的实施方式中,对于各个目标绘制区域之间的绘制顺序,可以设置为在画布上由上到下,由左到右的常规绘制顺序,相应的,也需要按照前述常规绘制顺序,将对应的目标绘制区域内的笔刷对象存入第一笔刷图层对应的笔刷队列中。
本公开实施例中,在将笔刷对象存入笔刷队列之前,需要确定各个笔刷对象的属性,其中,笔刷对象的属性不仅包括笔刷大小和笔刷位置信息,还可以包括笔刷颜色和笔刷方向。
一种可选的实施方式中,笔刷对象的笔刷颜色为基于目标图像上与该笔刷对象的笔刷位置信息对应的像素点的颜色值确定。具体的,首先确定该笔刷对象的笔刷位置信息,然后确定目标图像上的该笔刷位置信息对应的像素点,进而获取该像素点的颜色值,最终,将该像素点的颜色值确定为该笔刷对象的笔刷颜色。通过上述方式确定笔刷对象的笔刷颜色属性,能够提高笔刷对象的属性的确定效率,最终提高图像绘制过程的生成效率。
另外,笔刷对象的笔刷方向用于表示该笔刷对象的绘制方向。对于笔刷对象的笔刷方向的确定方式,在后续实施例中进行介绍,在此不再赘述。
S204:基于所述笔刷队列中的笔刷对象,生成所述目标图像对应的目标风格图像的绘制过程。
本公开实施例提供的图像绘制过程的生成方法中,首先,基于为目标图像设置的第一笔刷图层上的像素采样点的细节参数值,确定所述第一笔刷图层上的笔刷对象的笔刷大小和笔刷位置信息。然后,将所述第一笔刷图层上的笔刷对象存入所述第一笔刷图层对应的笔刷队列中。最后,基于所述笔刷队列中的笔刷对象,生成所述目标图像对应的目标风格图像的绘制过程。本公开基于每个像素采样点的细节参数值,确定对应的笔刷对象的笔刷大小和笔刷位置信息,各个笔刷对象的属性确定彼此独立,无需转化为复杂的数学模型求解最优解的数学问题,一定程度上提高了笔刷对象的属性的确定效率,进而提高了基于笔刷对象的属性生成图像绘制过程的效率。
另外,本公开实施例通过在第一笔刷图层上确定多个目标绘制区域,逐块的完成目标图像对应的目标风格图像的绘制,更贴近于真实的图像绘制过程,提高用户的体验。
基于上述实施例中的描述,本公开实施例提供了一种计算采像素样点的细节参数值的具体实施方式,在基于预设笔刷间隔值对目标绘制区域内的像素点进行均匀采样,得到该目标绘制区域内的像素采样点之后,还包括以下步骤:
首先,计算像素采样点分别在坐标轴的水平方向和竖直方向的梯度值,其次,基于水平方向和竖直方向的梯度值,构建该像素采样点对应的结构张量矩阵。然后对该结构张量矩阵进行特征值分解后,得到两个特征值;其中,所述两个特征值中较大的特征值用于表示该采样点的细节丰富程度。最终,将所述两个特征值中较大的特征值,确定为该像素采样点的细节参数值。
实际应用中,在确定像素采样点之后,首先计算该像素采样点分别在水平方向即X轴和竖直方向即Y轴方向的梯度信息g_x和g_y,然后利用公式(1)基于该梯度信息g_x和g_y,构建该像素采样点对应的结构张量矩阵Tσ,公式(1)如下所示;
Figure BDA0002662551500000151
其中,“*”表示卷积运算,Gσ表示标准差为σ的高斯核。
其次,对上述结构张量矩阵Tσ进行特征值分解,得到该像素采样点对应的两个特征值s1和s2,其中,s1>=s2。然后,基于该像素采样点对应的两个特征值中数值较大的特征值s1,确定为该像素采样点对应的细节参数值。
其中,s1可以用于表示该像素采样点的位置的细节丰富程度,s1的值越大,说明该像素采样点对应的细节丰富程度越高,该像素采样点对应的位置越不平坦,对绘制精细程度要求越高;而s1的值越小,说明该像素采样点对应的细节丰富程度越低,该像素采样点对应的位置越平坦,对绘制精细程度要求越低。
实际应用中,在确定像素采样点的细节参数值之后,基于该细节参数值确定笔刷对象的笔刷位置信息和笔刷大小等属性,具体的实现方式已在上述实施例中进行介绍,在此不再赘述。
另外,本公开实施例还提供了一种笔刷对象的笔刷方向的确定方式,具体的,可以基于目标绘制区域内的笔刷对象对应的像素采样点的方向向量,确定该笔刷对象的笔刷方向。
一种可选的实施方式中,对上述公式(1)中的结构张量矩阵Tσ进行特征值分解,不仅可以得到像素采样点对应的两个特征值s1和s2,还可以得到特征值s1和s2分别对应的特征向量v1和v2。其中,特征值s2对应的特征向量v2,能够用于表示该像素采样点的方向向量。具体的,本公开实施例基于特征值s2对应的特征向量v2,确定对应的笔刷对象的笔刷方向。
另一种可选的实施方式中,为了进一步提高笔刷方向的确定效率,可以随机生成各个笔刷对象的笔刷方向。在笔刷方向确定效率提高的前提下,本公开实施例一定程度上能够提高图像绘制过程的生成效率。
实际的目标风格图像的绘制场景中,例如油画的绘制场景中,通常是先画一层底图,然后在底图的基础上进一步的进行细节绘制,为了进一步的贴近真实图像绘制过程,本公开实施例还提供了一种图像绘制过程的生成方法,参考图4,为本公开实施例提供的另一种图像绘制过程的生成方法流程图,在上述图2中各个步骤的基础上,该方法包括:
S401:确定为目标图像设置的第二笔刷图层上的笔刷对象的属性;其中,所述笔刷对象的属性包括基于预设笔刷尺寸确定的笔刷大小。
本公开实施例中,第二笔刷图层也可以称为底图笔刷图层,在确定目标图像之后,为目标图像设置底图笔刷图层,并确定所述底图笔刷图层上的笔刷对象的属性;其中,所述笔刷对象的属性包括预设笔刷大小。
本公开实施例中,底图笔刷图层上的各个笔刷对象的笔刷大小可以为基于预设笔刷大小确定的,通常底图可以采用较大笔刷进行绘制,因此预设笔刷大小可以设置为大笔刷。
另外,底图笔刷图层上的笔刷对象的笔刷位置信息,可以基于预设笔刷间隔值对底图笔刷图层上的像素点进行均匀采样,并确定底图笔刷图层上的各个采样点的位置信息,为对应的笔刷对象的笔刷位置信息。
另外,底图笔刷图层上的笔刷对象的笔刷方向,可以基于该笔刷对象对应的像素点的方向向量确定,也可以随机确定,在此不做限定。
另外,底图笔刷图层上的笔刷对象的笔刷颜色,可以为基于目标图像上与该笔刷对象的笔刷位置信息对应的像素点的颜色值确定的。
S402:将所述第二笔刷图层上的各个笔刷对象存入所述第二笔刷图层对应的笔刷队列中。
本公开实施例中,在确定底图笔刷图层上的各个笔刷对象的属性之后,将各个笔刷对象存入底图笔刷图层建立的笔刷队列中。
一种可选的实施方式中,为了更贴近于真实的图像绘制过程,可以将底图笔刷图层划分为若干目标绘制区域,然后分别对每个目标绘制区域内的各个笔刷对象的绘制顺序进行随机打乱,以目标绘制区域为单位,依次将各个目标绘制区域内随机打乱绘制顺序的各个笔刷对象存入底图笔刷图层对应的笔刷队列中,以实现在对底图进行绘制时,同一目标绘制区域内先后绘制的笔刷之间是无规律且随机的,而各个目标绘制区域的绘制是存在先后顺序的,即完成一块区域的绘制之后,再开启对另一块区域的绘制,最大程度上体现真实的图像绘制过程,提高用户的体验。
S403:在为目标图像设置的第一笔刷图层上,确定至少一个目标绘制区域。
S404:基于所述目标绘制区域内的像素采样点的细节参数值,确定所述目标绘制区域内的笔刷对象的笔刷大小和笔刷位置信息。
S405:基于所述第一笔刷图层上的所述至少一个目标绘制区域的绘制顺序,依次将各个目标绘制区域内的笔刷对象存入所述第一笔刷图层对应的笔刷队列中。
针对本公开实施例中的上述S403-S405的理解,可参照上述实施例中S201-S203的描述,在此不再赘述。
S406:为所述第一笔刷图层和所述第二笔刷图层设置绘制顺序。
本公开实施例中,在确定底图笔刷图层和第一笔刷图层分别对应笔刷队列,以及将完成属性确定的各个笔刷对象存入对应的笔刷队列之后,为底图笔刷图层和第一笔刷图层设置绘制顺序,具体的,设置底图笔刷图层的绘制顺序先于第一笔刷图层的绘制。
实际应用中,为底图笔刷图层和第一笔刷图层设置绘制顺序,实质上是为底图笔刷图层和第一笔刷图层分别对应的笔刷队列设置笔刷对象出队的先后顺序。具体的,在底图笔刷图层对应的笔刷队列中的各个笔刷对象均完成出队后,才会触发第一笔刷图层对应的笔刷队列中的各个笔刷对象的出队,以实现在图像绘制视频中展现先画底图再画细节的图像绘制流程,使得生成的图像绘制过程更贴近于真实的图像绘制场景。
S407:根据所述绘制顺序,分别基于所述第一笔刷图层和所述第二笔刷图层对应的笔刷队列中各个笔刷对象的属性,在画布上绘制笔刷,生成所述目标图像对应的目标风格图像的绘制过程。
本公开实施例中,基于设置的绘制顺序,依次对底图笔刷图层和第一笔刷图层分别对应的笔刷队列中的各个笔刷对象出队,然后基于出队的笔刷对象的属性进行笔刷绘制,最终先后完成底图笔刷图层和第一笔刷图层的绘制。其中,底图笔刷图层的绘制是对目标图像对应的图像风格图像的底图的绘制,而第一笔刷图层的绘制是基于底图的进一步细节的绘制。
本公开实施例中,基于对底图笔刷图层和第一笔刷图层上各个笔刷对象的绘制过程,生成目标图像对应的图像绘制视频。其中,图像绘制过程中对底图笔刷图层的绘制过程先于第一笔刷图层的绘制过程。
本公开实施例提供的图像绘制过程的生成方法,结合底图笔刷图层和第一笔刷图层的绘制过程,最终生成目标图像对应的图像绘制过程,可见,本公开实施例生成的图像绘制过程能够更贴近实际图像绘制场景中的图像绘制过程,一定程度上进一步提高了用户的体验。
实际应用中,目标图像可以为人物图像,而对于人物图像通常对于人脸部位的绘制效果要求较高,因此,本公开实施例还提供了一种图像绘制过程的生成方法,在上述实施例的基础上,进一步的加强了对人脸部位的效果处理。
参考图5,为本公开实施例提供的另一种图像绘制视频的生成的方法流程图。在上述图2中各个步骤的基础上,还可以包括:
S501:如果检测到目标图像上存在人脸,则基于目标图像上的人脸区域,为目标图像设置人脸笔刷图层。
本公开实施例中,在确定目标图像之后,可以检测目标图像上是否存在人脸。
一种可选的实施方式中,可以通过人脸检测方式,对目标图像上的人脸进行识别,以确定目标图像上是否存在人脸。
本公开实施例中,在检测到目标图像上存在人脸后,将包含该人脸的区域确定为人脸区域,将该人脸区域从目标图像上分割出来,并基于分割出来的人脸区域确定目标图像的人脸笔刷图层。具体的,对人脸笔刷图层的绘制,具体是指对目标图像上的人脸区域的细节绘制。
S502:基于所述人脸区域的面积,确定所述人脸笔刷图层上的笔刷对象的笔刷大小;其中,所述笔刷对象的属性包括所述笔刷大小、笔刷位置信息、笔刷方向和笔刷颜色。
本公开实施例中,在确定人脸区域后,基于人脸区域的面积确定人脸笔刷图层上的笔刷对象的笔刷大小,具体的,人脸区域的面积越大,笔刷对象的笔刷大小越大,即采用更大的笔刷对人脸笔刷图层进行绘制。
另外,人脸笔刷图层上的笔刷对象的笔刷位置信息,可以基于预设笔刷间隔值对人脸笔刷图层上的像素点进行均匀采样,并确定人脸笔刷图层上的各个采样点的位置信息,为对应的笔刷对象的笔刷位置信息。
另外,人脸笔刷图层上的笔刷对象的笔刷方向,可以基于该笔刷对象对应的像素点的方向向量确定,也可以随机确定,在此不做限定。
另外,人脸笔刷图层上的笔刷对象的笔刷颜色,可以为基于目标图像上与该笔刷对象的笔刷位置信息对应的像素点的颜色值确定的。
S503:将所述人脸笔刷图层上的各个笔刷对象存入所述人脸笔刷图层对应的笔刷队列中。
本公开实施例中,在确定人脸笔刷图层上的各个笔刷对象的属性之后,将各个笔刷对象存入为人脸笔刷图层建立的笔刷队列中。
一种可选的实施方式中,为了更贴近于真实的图像绘制过程,可以将人脸笔刷图层上的各个笔刷对象的绘制顺序进行随机打乱,并将随机打乱绘制顺序的各个笔刷对象存入人脸笔刷图层对应的笔刷队列中,以实现在对人脸进行绘制时,各个笔刷之间是无规律且随机的,最大程度上体现真实的图像绘制过程,提高用户的体验。
S504:在为目标图像设置的第一笔刷图层上,确定至少一个目标绘制区域。
S505:基于所述目标绘制区域内的像素采样点的细节参数值,确定所述目标绘制区域内的笔刷对象的笔刷大小和笔刷位置信息。
S506:基于所述第一笔刷图层上的所述至少一个目标绘制区域的绘制顺序,依次将各个目标绘制区域内的笔刷对象存入所述第一笔刷图层对应的笔刷队列中。
针对本公开实施例中的上述S504-S506的理解,可参照上述实施例中S201-S203的描述,在此不再赘述。
S507:为所述第一笔刷图层和所述人脸笔刷图层设置绘制顺序。
本公开实施例中,在确定人脸笔刷图层和第一笔刷图层分别对应笔刷队列,以及将完成属性确定的各个笔刷对象存入对应的笔刷队列之后,为人脸笔刷图层和第一笔刷图层设置绘制顺序,具体的,设置第一笔刷图层的绘制顺序先于人脸笔刷图层的绘制。
实际应用中,为人脸笔刷图层和第一笔刷图层设置绘制顺序,实质上是为人脸笔刷图层和第一笔刷图层分别对应的笔刷队列设置笔刷对象出队的先后顺序。具体的,在第一笔刷图层对应的笔刷队列中的各个笔刷对象均完成出队后,才会触发人脸笔刷图层对应的笔刷队列中的各个笔刷对象的出队,以实现在图像绘制视频中展现先画第一笔刷图层再画人脸细节的图像绘制流程,使得生成的图像绘制过程更贴近于真实的图像绘制场景。
S508:根据所述绘制顺序,分别基于所述第一笔刷图层和所述人脸笔刷图层对应的笔刷队列中各个笔刷对象的属性,在画布上绘制笔刷,生成所述目标图像对应的目标风格图像的绘制过程。
本公开实施例中,基于设置的绘制顺序,依次对第一笔刷图层和人脸笔刷图层分别对应的笔刷队列中的各个笔刷对象出队,然后基于出队的笔刷对象的属性进行笔刷绘制,最终先后完成第一笔刷图层和人脸笔刷图层的绘制。其中,第一笔刷图层的绘制是对目标图像对应的目标风格图像的整个画面的绘制,而人脸笔刷图层的绘制是基于整个画面的绘制的进一步人脸细节的绘制。
本公开实施例中,基于对人脸笔刷图层和第一笔刷图层上各个笔刷对象的绘制过程,生成目标图像对应的目标风格图像的绘制过程。其中,图像绘制视频中对第一笔刷图层的绘制过程先于人脸笔刷图层的绘制过程。
本公开实施例提供的图像绘制过程的生成方法,基于人脸笔刷图层对人物图像中的人脸区域进行细节效果的绘制,使得生成的图像绘制过程能够更贴近实际图像绘制场景中的图像绘制过程,进一步提高了用户的体验。
在上述实施例的基础上,本公开实施例还可以结合对底图笔刷图层、第一笔刷图层和人脸笔刷图层的依次绘制,最终生成目标图像对应的图像绘制过程,实现了在图像绘制视频中先绘制底图,再基于底图进行细节绘制,最终针对人脸进行细节绘制的真实图像绘制流程,进一步的贴近了实际图像绘制场景中的图像绘制过程,提高了用户的体验。
针对结合对底图笔刷图层、第一笔刷图层和人脸笔刷图层的依次绘制,最终生成目标图像对应的图像绘制过程的具体实现过程可结合上述实施例进行理解,在此不再赘述。
另外,为了进一步提高图像绘制过程中最终绘制的图像的质量,本公开实施例还可以在针对图像绘制过程中绘制完成的图像进行效果处理,例如锐化处理等。具体的,将经过锐化处理的图像添加到生成的图像绘制过程的最后部分中,作为图像绘制过程的最后几个图像帧,以增强绘制完成的图像的清晰度。
另外,图像绘制视频中还可以包括对图像添加凹凸纹理效果的图像帧,从而使得基于图像绘制过程绘制的目标风格图像能够最大程度上体现出实际绘制图像的效果。
与上述方法实施例相对应的,本公开还提供了一种图像绘制过程的生成装置,参考图6,为本公开实施例提供的一种图像绘制过程的生成装置的结构示意图,所述装置包括:
第一确定模块601,用于基于为目标图像设置的第一笔刷图层上的像素采样点的细节参数值,确定所述第一笔刷图层上的笔刷对象的笔刷大小和笔刷位置信息;
第一存入模块602,用于将所述第一笔刷图层上的笔刷对象存入所述第一笔刷图层对应的笔刷队列中;
生成模块603,用于基于所述笔刷队列中的笔刷对象,生成所述目标图像对应的目标风格图像的绘制过程。
一种可选的实施方式中,所述第一确定模块601,包括:
第一确定子模块,用于在为目标图像设置的第一笔刷图层上,确定至少一个目标绘制区域;
第二确定子模块,用于基于所述目标绘制区域内的像素采样点的细节参数值,确定所述目标绘制区域内的笔刷对象的笔刷大小和笔刷位置信息;其中,所述细节参数值用于表示所述像素采样点的细节丰富程度;
相应的,所述第一存入模块603,具体用于基于所述第一笔刷图层上的所述至少一个目标绘制区域的绘制顺序,依次将各个目标绘制区域内的笔刷对象存入所述第一笔刷图层对应的笔刷队列中。
一种可选的实施方式中,所述第一确定模块,包括:
采样子模块,用于基于预设笔刷间隔值,对所述目标绘制区域内的像素点进行均匀采样,得到所述目标绘制区域内的像素采样点;
第一计算子模块,用于计算所述像素采样点的细节参数值;
判断子模块,用于判断所述细节参数值是否处于所述预设笔刷间隔值对应的细节范围;其中,所述细节参数值用于表示所述像素采样点的细节丰富程度;
第三确定子模块,用于在所述细节参数值处于所述预设笔刷间隔值对应的细节范围时,基于所述像素采样点的位置信息确定笔刷对象的笔刷位置信息,以及将所述预设笔刷间隔值对应的笔刷尺寸确定为所述笔刷对象的笔刷大小。
一种可选的实施方式中,所述第一计算子模块,包括:
第二计算子模块,用于计算所述像素采样点分别在坐标轴的水平方向和竖直方向的梯度值;
构建子模块,用于基于所述水平方向和竖直方向的梯度值,构建所述像素采样点对应的结构张量矩阵;
分解子模块,用于对所述结构张量矩阵进行特征值分解后,得到两个特征值;其中,所述两个特征值中较大的特征值用于表示所述像素采样点的细节丰富程度;
第四确定子模块,用于将所述两个特征值中较大的特征值,确定为所述像素采样点的细节参数值。
一种可选的实施方式中,所述笔刷对象的属性还包括笔刷方向;所述装置还包括:
第二确定模块,用于确定所述两个特征值中较小的特征值对应的方向向量;并基于所述方向向量,确定所述像素采样点对应的笔刷对象的笔刷方向。
一种可选的实施方式中,所述装置还包括:
打乱模块,用于将所述目标绘制区域内的笔刷对象的绘制顺序进行随机打乱处理。
一种可选的实施方式中,所述笔刷对象的属性还包括笔刷颜色;所述笔刷颜色为基于所述目标图像上与所述笔刷对象的笔刷位置信息对应的像素点的颜色值确定的。
一种可选的实施方式中,所述装置还包括:
第三确定模块,用于确定为所述目标图像设置的第二笔刷图层上的笔刷对象的属性;其中,所述笔刷对象的属性包括预设笔刷大小;
第二存入模块,用于将所述第二笔刷图层上的各个笔刷对象存入所述第二笔刷图层对应的笔刷队列中;
相应的,所述生成模块,包括:
第一设置子模块,用于为所述第一笔刷图层和所述第二笔刷图层设置绘制顺序;
第一生成子模块,用于根据所述绘制顺序,分别基于所述第一笔刷图层和所述第二笔刷图层对应的笔刷队列中各个笔刷对象的属性,在画布上绘制笔刷,生成所述目标图像对应的目标风格图像的绘制过程。
一种可选的实施方式中,所述第四确定模块,包括:
采用子模块,用于基于预设笔刷间隔值,对所述第二笔刷图层上的像素点进行均匀采样,得到所述第二笔刷图层上的像素采样点;
第五确定子模块,用于将所述像素采样点的位置信息确定为所述第二笔刷图层上的笔刷对象的笔刷位置信息,以及,将所述预设笔刷间隔值对应的预设笔刷尺寸确定为所述笔刷对象的笔刷大小。
一种可选的实施方式中,所述装置还包括:
第一设置模块,用于在检测到所述目标图像上存在人脸时,基于所述目标图像上的人脸区域,为所述目标图像设置人脸笔刷图层;
第四确定模块,用于基于所述人脸区域的面积,确定所述人脸笔刷图层上的笔刷对象的笔刷大小;其中,所述笔刷对象的属性包括所述笔刷大小、笔刷位置信息、笔刷方向和笔刷颜色;
第三存入模块,用于将所述人脸笔刷图层上的各个笔刷对象存入所述人脸笔刷图层对应的笔刷队列中;
相应的,所述生成模块,包括:
第二设置子模块,用于为所述第一笔刷图层和所述人脸笔刷图层设置绘制顺序;
第二生成子模块,用于根据所述绘制顺序,分别基于所述第一笔刷图层和所述人脸笔刷图层对应的笔刷队列中各个笔刷对象的属性,在画布上绘制笔刷,生成所述目标图像对应的目标风格图像的绘制过程。
一种可选的实施方式中,所述第一确定子模块,具体用于:
基于目标图像上各个像素点之间的颜色值相似度,在为所述目标图像设置的第一笔刷图层上,确定至少一个目标绘制区域。
一种可选的实施方式中,所述装置还包括:
添加效果模块,用于在生成所述目标图像对应的目标风格图像之后,为所述目标风格图像添加凹凸纹理效果。
本公开实施例提供的图像绘制过程的生成装置中,首先,基于为目标图像设置的第一笔刷图层上的像素采样点的细节参数值,确定所述第一笔刷图层上的笔刷对象的笔刷大小和笔刷位置信息。然后,将所述第一笔刷图层上的笔刷对象存入所述第一笔刷图层对应的笔刷队列中。最后,基于所述笔刷队列中的笔刷对象,生成所述目标图像对应的目标风格图像的绘制过程。本公开实施例基于每个像素采样点的细节参数值,确定对应的笔刷对象的笔刷大小和笔刷位置信息,由于各个笔刷对象的属性确定彼此独立,无需转化为复杂的数学模型求解最优解的数学问题,一定程度上提高了笔刷对象的属性的确定效率,最终提高了图像绘制过程的生成效率。
除了上述方法和装置以外,本公开实施例还提供了一种计算机可读存储介质,计算机可读存储介质中存储有指令,当所述指令在终端设备上运行时,使得所述终端设备实现本公开实施例所述的图像绘制过程的生成方法。
另外,本公开实施例还提供了一种图像绘制过程的生成设备,参见图7所示,可以包括:
处理器701、存储器702、输入装置703和输出装置704。图像绘制过程的生成设备中的处理器701的数量可以一个或多个,图7中以一个处理器为例。在本公开的一些实施例中,处理器701、存储器702、输入装置703和输出装置704可通过总线或其它方式连接,其中,图7中以通过总线连接为例。
存储器702可用于存储软件程序以及模块,处理器701通过运行存储在存储器702的软件程序以及模块,从而执行图像绘制过程的生成设备的各种功能应用以及数据处理。存储器702可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序等。此外,存储器702可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。输入装置703可用于接收输入的数字或字符信息,以及产生与图像绘制过程的生成设备的用户设置以及功能控制有关的信号输入。
具体在本实施例中,处理器701会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器702中,并由处理器701来运行存储在存储器702中的应用程序,从而实现上述图像绘制过程的生成设备的各种功能。
需要说明的是,在本文中,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅是本公开的具体实施方式,使本领域技术人员能够理解或实现本公开。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本公开的精神或范围的情况下,在其它实施例中实现。因此,本公开将不会被限制于本文所述的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (14)

1.一种图像绘制过程的生成方法,其特征在于,所述方法包括:
基于为目标图像设置的第一笔刷图层上的像素采样点的细节参数值,确定所述第一笔刷图层上的笔刷对象的笔刷大小和笔刷位置信息;其中,所述细节参数值用于表示所述像素采样点的细节丰富程度,所述细节丰富程度与所述笔刷大小成反比;
将所述第一笔刷图层上的笔刷对象存入所述第一笔刷图层对应的笔刷队列中;
基于所述笔刷队列中的笔刷对象,生成所述目标图像对应的目标风格图像的绘制过程;
所述基于为目标图像设置的第一笔刷图层上的像素采样点的细节参数值,确定所述第一笔刷图层上的笔刷对象的笔刷大小和笔刷位置信息,包括:
基于预设笔刷间隔值,对第一笔刷图层上的像素点进行均匀采样,得到所述第一笔刷图层上的像素采样点;
计算所述像素采样点的细节参数值,并判断所述细节参数值是否处于所述预设笔刷间隔值对应的细节范围;
如果所述细节参数值处于所述预设笔刷间隔值对应的细节范围,则基于所述像素采样点的位置信息确定笔刷对象的笔刷位置信息,以及将所述预设笔刷间隔值对应的笔刷尺寸确定为所述笔刷对象的笔刷大小。
2.根据权利要求1所述的方法,其特征在于,所述基于为目标图像设置的第一笔刷图层上的像素采样点的细节参数值,确定所述第一笔刷图层上的笔刷对象的笔刷大小和笔刷位置信息,包括:
在为目标图像设置的第一笔刷图层上,确定至少一个目标绘制区域;
基于所述目标绘制区域内的像素采样点的细节参数值,确定所述目标绘制区域内的笔刷对象的笔刷大小和笔刷位置信息;
相应的,所述将所述第一笔刷图层上的笔刷对象存入所述第一笔刷图层对应的笔刷队列中,包括:
基于所述第一笔刷图层上的所述至少一个目标绘制区域的绘制顺序,依次将各个目标绘制区域内的笔刷对象存入所述第一笔刷图层对应的笔刷队列中。
3.根据权利要求1所述的方法,其特征在于,所述计算所述像素采样点的细节参数值,包括:
计算所述像素采样点分别在坐标轴的水平方向和竖直方向的梯度值;
基于所述水平方向和竖直方向的梯度值,构建所述像素采样点对应的结构张量矩阵;
对所述结构张量矩阵进行特征值分解后,得到两个特征值;其中,所述两个特征值中较大的特征值用于表示所述像素采样点的细节丰富程度;
将所述两个特征值中较大的特征值,确定为所述像素采样点的细节参数值。
4.根据权利要求3所述的方法,其特征在于,所述笔刷对象的属性还包括笔刷方向;所述对所述结构张量矩阵进行特征值分解得到两个特征值之后,且在将所述第一笔刷图层上的笔刷对象存入所述第一笔刷图层对应的笔刷队列中之前,还包括:
对所述结构张量矩阵进行特征值分解后,得到与所述两个特征值中较小的特征值对应的方向向量;
基于所述方向向量,确定所述像素采样点对应的笔刷对象的笔刷方向。
5.根据权利要求2所述的方法,其特征在于,所述基于所述第一笔刷图层上的所述至少一个目标绘制区域的绘制顺序,依次将各个目标绘制区域内的笔刷对象存入所述第一笔刷图层对应的笔刷队列中之前,还包括:
将所述目标绘制区域内的笔刷对象的绘制顺序进行随机打乱处理。
6.根据权利要求1-5中任一项所述的方法,其特征在于,所述笔刷对象的属性还包括笔刷颜色;所述笔刷颜色为基于所述目标图像上与所述笔刷对象的笔刷位置信息对应的像素点的颜色值确定的。
7.根据权利要求1-5中任一项所述的方法,其特征在于,所述基于所述笔刷队列中的笔刷对象,生成所述目标图像对应的目标风格图像的绘制过程之前,还包括:
确定为所述目标图像设置的第二笔刷图层上的笔刷对象的属性;其中,所述笔刷对象的属性包括基于预设笔刷尺寸确定的笔刷大小;
将所述第二笔刷图层上的各个笔刷对象存入所述第二笔刷图层对应的笔刷队列中;
相应的,所述基于所述笔刷队列中的笔刷对象,生成所述目标图像对应的目标风格图像的绘制过程,包括:
为所述第一笔刷图层和所述第二笔刷图层设置绘制顺序;
根据所述绘制顺序,分别基于所述第一笔刷图层和所述第二笔刷图层对应的笔刷队列中各个笔刷对象的属性,在画布上绘制笔刷,生成所述目标图像对应的目标风格图像的绘制过程。
8.根据权利要求7所述的方法,其特征在于,所述确定为所述目标图像设置第二笔刷图层上的笔刷对象的属性;其中,所述笔刷对象的属性包括基于预设笔刷尺寸确定的笔刷大小,包括:
基于预设笔刷间隔值,对所述第二笔刷图层上的像素点进行均匀采样,得到所述第二笔刷图层上的像素采样点;
将所述像素采样点的位置信息确定为所述第二笔刷图层上的笔刷对象的笔刷位置信息,以及,将所述预设笔刷间隔值对应的预设笔刷尺寸确定为所述笔刷对象的笔刷大小。
9.根据权利要求1-5中任一项所述的方法,其特征在于,所述基于所述笔刷队列中的笔刷对象,生成所述目标图像对应的目标风格图像的绘制过程之前,还包括:
如果检测到所述目标图像上存在人脸,则基于所述目标图像上的人脸区域,为所述目标图像设置人脸笔刷图层;
基于所述人脸区域的面积,确定所述人脸笔刷图层上的笔刷对象的笔刷大小;其中,所述笔刷对象的属性包括所述笔刷大小、笔刷位置信息、笔刷方向和笔刷颜色;
将所述人脸笔刷图层上的各个笔刷对象存入所述人脸笔刷图层对应的笔刷队列中;
相应的,所述基于所述笔刷队列中的笔刷对象,生成所述目标图像对应的目标风格图像的绘制过程,包括:
为所述第一笔刷图层和所述人脸笔刷图层设置绘制顺序;
根据所述绘制顺序,分别基于所述第一笔刷图层和所述人脸笔刷图层对应的笔刷队列中各个笔刷对象的属性,在画布上绘制笔刷,生成所述目标图像对应的目标风格图像的绘制过程。
10.根据权利要求2所述的方法,其特征在于,所述在为所述目标图像设置的第一笔刷图层上,确定至少一个目标绘制区域,包括:
基于目标图像上各个像素点之间的颜色值相似度,在为所述目标图像设置的第一笔刷图层上,确定至少一个目标绘制区域。
11.根据权利要求1所述的方法,其特征在于,所述基于所述笔刷队列中的笔刷对象,生成所述目标图像对应的目标风格图像的绘制过程之后,还包括:
在生成所述目标图像对应的目标风格图像之后,为所述目标风格图像添加凹凸纹理效果。
12.一种图像绘制过程的生成装置,其特征在于,所述装置包括:
第一确定模块,用于基于为目标图像设置的第一笔刷图层上的像素采样点的细节参数值,确定所述第一笔刷图层上的笔刷对象的笔刷大小和笔刷位置信息;其中,所述细节参数值用于表示所述像素采样点的细节丰富程度,所述细节丰富程度与所述笔刷大小成反比;
第一存入模块,用于将所述第一笔刷图层上的笔刷对象存入所述第一笔刷图层对应的笔刷队列中;
生成模块,用于基于所述笔刷队列中的笔刷对象,生成所述目标图像对应的目标风格图像的绘制过程;
所述第一确定模块,包括:
采样子模块,用于基于预设笔刷间隔值,对目标绘制区域内的像素点进行均匀采样,得到所述目标绘制区域内的像素采样点;
第一计算子模块,用于计算所述像素采样点的细节参数值;
判断子模块,用于判断所述细节参数值是否处于所述预设笔刷间隔值对应的细节范围;
第三确定子模块,用于在所述细节参数值处于所述预设笔刷间隔值对应的细节范围时,基于所述像素采样点的位置信息确定笔刷对象的笔刷位置信息,以及将所述预设笔刷间隔值对应的笔刷尺寸确定为所述笔刷对象的笔刷大小。
13.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有指令,当所述指令在终端设备上运行时,使得所述终端设备实现如权利要求1-11任一项所述的方法。
14.一种设备,其特征在于,包括:存储器,处理器,及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时,实现如权利要求1-11任一项所述的方法。
CN202010909045.6A 2020-09-02 2020-09-02 一种图像绘制过程的生成方法、装置、设备及存储介质 Active CN112051959B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202010909045.6A CN112051959B (zh) 2020-09-02 2020-09-02 一种图像绘制过程的生成方法、装置、设备及存储介质
PCT/CN2021/112184 WO2022048421A1 (zh) 2020-09-02 2021-08-12 一种图像绘制过程的生成方法、装置、设备及存储介质
US18/023,953 US20240242401A1 (en) 2020-09-02 2021-08-12 Image drawing process generation method and apparatus, device, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010909045.6A CN112051959B (zh) 2020-09-02 2020-09-02 一种图像绘制过程的生成方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN112051959A CN112051959A (zh) 2020-12-08
CN112051959B true CN112051959B (zh) 2022-05-27

Family

ID=73606549

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010909045.6A Active CN112051959B (zh) 2020-09-02 2020-09-02 一种图像绘制过程的生成方法、装置、设备及存储介质

Country Status (3)

Country Link
US (1) US20240242401A1 (zh)
CN (1) CN112051959B (zh)
WO (1) WO2022048421A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112051960B (zh) * 2020-09-02 2022-03-25 北京字节跳动网络技术有限公司 一种图像绘制方法、装置、设备及存储介质
CN112051959B (zh) * 2020-09-02 2022-05-27 北京字节跳动网络技术有限公司 一种图像绘制过程的生成方法、装置、设备及存储介质
CN112596659B (zh) * 2020-12-23 2021-10-15 陇东学院 一种基于智能语音和图像处理的绘画方法和装置
CN114119847B (zh) * 2021-12-05 2023-11-07 北京字跳网络技术有限公司 一种图形处理方法、装置、计算机设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102938157A (zh) * 2012-10-31 2013-02-20 郑博研 一种基于圆域b样条曲线的风格化手绘生成方法与系统
CN103793150A (zh) * 2012-10-31 2014-05-14 腾讯科技(深圳)有限公司 图像选择方法和系统
CN103903293A (zh) * 2012-12-27 2014-07-02 腾讯科技(深圳)有限公司 笔触感艺术图像的生成方法及装置
CN104166970A (zh) * 2013-05-16 2014-11-26 北京壹人壹本信息科技有限公司 笔迹数据文件的生成、恢复显示方法及装置、电子装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4098662B2 (ja) * 2003-04-30 2008-06-11 任天堂株式会社 塗り絵画像生成装置、プログラム及び方法
CN108089761A (zh) * 2018-01-02 2018-05-29 京东方科技集团股份有限公司 电子画板、远程教学画板、绘画仿真方法和装置
CN112051959B (zh) * 2020-09-02 2022-05-27 北京字节跳动网络技术有限公司 一种图像绘制过程的生成方法、装置、设备及存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102938157A (zh) * 2012-10-31 2013-02-20 郑博研 一种基于圆域b样条曲线的风格化手绘生成方法与系统
CN103793150A (zh) * 2012-10-31 2014-05-14 腾讯科技(深圳)有限公司 图像选择方法和系统
CN103903293A (zh) * 2012-12-27 2014-07-02 腾讯科技(深圳)有限公司 笔触感艺术图像的生成方法及装置
CN104166970A (zh) * 2013-05-16 2014-11-26 北京壹人壹本信息科技有限公司 笔迹数据文件的生成、恢复显示方法及装置、电子装置

Also Published As

Publication number Publication date
US20240242401A1 (en) 2024-07-18
CN112051959A (zh) 2020-12-08
WO2022048421A1 (zh) 2022-03-10

Similar Documents

Publication Publication Date Title
CN112051959B (zh) 一种图像绘制过程的生成方法、装置、设备及存储介质
CN108961303B (zh) 一种图像处理方法、装置、电子设备和计算机可读介质
CN112308095A (zh) 图片预处理及模型训练方法、装置、服务器及存储介质
CN109522902B (zh) 空-时特征表示的提取
CN109583509B (zh) 数据生成方法、装置及电子设备
CN110958469A (zh) 视频处理方法、装置、电子设备及存储介质
CN109064525B (zh) 一种图片格式转换方法、装置、设备和存储介质
CN110533594A (zh) 模型训练方法、图像重建方法、存储介质及相关设备
KR20200102409A (ko) 키 프레임 스케줄링 방법 및 장치, 전자 기기, 프로그램과 매체
WO2022048414A1 (zh) 一种图像生成方法、装置、设备及存储介质
CN111353955A (zh) 一种图像处理方法、装置、设备和存储介质
CN108961268B (zh) 一种显著图计算方法及相关装置
CN108734712B (zh) 背景分割的方法、装置及计算机存储介质
CN113506305A (zh) 三维点云数据的图像增强方法、语义分割方法及装置
CN113298821A (zh) 一种基于Nystrom谱聚类的超像素抠图方法
CN114942854A (zh) 一种gif动图的截图方法和相关设备
CN113763240B (zh) 一种点云缩略图生成方法、装置、设备及存储介质
CN111127310B (zh) 一种图像处理方法、装置、电子设备及存储介质
CN113256484A (zh) 一种对图像进行风格化处理的方法及装置
CN114693697A (zh) 图像处理方法、装置、设备及计算机可读存储介质
CN111199514B (zh) 图像背景虚化方法、装置、设备及可读存储介质
CN117788864A (zh) 图像特征点提取匹配方法、装置、设备及存储介质
Pan et al. Salient structural elements based texture synthesis
WO2024066090A1 (zh) 基于纹理特征的角点检测方法、系统、电子设备及介质
CN116416271A (zh) 运动矢量估计方法、计算装置及相关产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant