CN113709370A - 图像生成方法、装置、电子设备及可读存储介质 - Google Patents

图像生成方法、装置、电子设备及可读存储介质 Download PDF

Info

Publication number
CN113709370A
CN113709370A CN202110991615.5A CN202110991615A CN113709370A CN 113709370 A CN113709370 A CN 113709370A CN 202110991615 A CN202110991615 A CN 202110991615A CN 113709370 A CN113709370 A CN 113709370A
Authority
CN
China
Prior art keywords
image
replaced
replacing
target
processed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110991615.5A
Other languages
English (en)
Other versions
CN113709370B (zh
Inventor
曹哲
徐利存
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Co Ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Priority to CN202110991615.5A priority Critical patent/CN113709370B/zh
Publication of CN113709370A publication Critical patent/CN113709370A/zh
Application granted granted Critical
Publication of CN113709370B publication Critical patent/CN113709370B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请公开了一种图像生成方法、装置、电子设备及可读存储介质,属于图像处理技术领域。所述方法包括:获取待处理图像中的目标对象和待替换对象;根据所述待处理图像的图像场景信息和所述目标对象的对象姿态信息,确定所述待替换对象对应的替换对象;基于所述替换对象替换所述待处理图像中的待替换对象,生成目标图像。

Description

图像生成方法、装置、电子设备及可读存储介质
技术领域
本申请属于图像处理技术领域,具体涉及一种图像生成方法、装置、电子设备及可读存储介质。
背景技术
随着科学技术的迅猛发展,人们对电子设备拍照的要求也越来越高。
在用户使用电子设备拍照的过程中,经常会遇到路人经过的情况,对于用户而言,路人经过会影响拍摄照片的结果。目前,为了对拍摄到的包含路人的图像进行处理时,需要用户在图像中选定路人,然后通过图像的背景信息对路人在图像中所处的区域进行填补。而在拍摄的图像中路人较多时,需要用户逐个选定路人,操作比较耗时,降低了用户的体验。
发明内容
本申请实施例的目的是提供一种图像生成方法、装置、电子设备及可读存储介质,能够解决现有技术中的图像处理方式较为耗时,降低了用户体验的问题。
第一方面,本申请实施例提供了一种图像生成方法,该方法包括:
获取待处理图像中的目标对象和待替换对象;
根据所述待处理图像的图像场景信息和所述目标对象的对象姿态信息,确定所述待替换对象对应的替换对象;
基于所述替换对象替换所述待处理图像中的待替换对象,生成目标图像。
第二方面,本申请实施例提供了一种图像生成装置,该装置包括:
目标对象获取模块,用于获取待处理图像中的目标对象和待替换对象;
替换对象确定模块,用于根据所述待处理图像的图像场景信息和所述目标对象的对象姿态信息,确定所述待替换对象对应的替换对象;
目标图像生成模块,用于基于所述替换对象替换所述待处理图像中的待替换对象,生成目标图像。
第三方面,本申请实施例提供了一种电子设备,该电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第一方面所述的图像生成方法的步骤。
第四方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第一方面所述的图像生成方法的步骤。
第五方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第一方面所述的图像生成方法。
在本申请实施例中,通过获取待处理图像中的目标对象和待替换对象,根据待处理图像的图像场景信息和目标对象的对象姿态信息,确定待替换对象对应的替换对象,并基于替换对象替换待处理图像中的待替换对象生成目标图像。本申请实施例通过结合待处理图像的图像场景和目标对象的姿态对图像中的待替换对象选定替换对象,并进行替换,无需用户逐个选定图像中的每个待替换对象,无需用户手动操作,极大地降低了图像处理时间,提高了用户体验。
附图说明
图1为本申请实施例提供的一种图像生成方法的步骤流程图;
图2为本申请实施例提供的一种图像生成装置的结构示意图;
图3为本申请实施例提供的一种电子设备的结构示意图;
图4为本申请实施例提供的另一种电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的图像生成方法进行详细地说明。
参照图1,示出了本申请实施例提供的一种图像生成方法的步骤流程图,如图1所示,该图像生成方法可以包括如下步骤:
步骤101:获取待处理图像中的目标对象和待替换对象。
本申请实施例可以应用于结合图像中的目标对象的对象姿态和图像拍摄场景对图像中的待替换对象进行替换对场景中。
目标对象是指待处理图像中的主体对象,待替换对象是指待处理图像中的非主体对象,即需要进行替换的对象,例如,在对用户A进行图像拍摄时,在拍摄的图像中同时包含用户A和用户B时,则用户A即为主体对象,用户B即为非主体对象,即需要进行替换的对象。
当然,在具体实现中,目标对象和非替换对象不仅限于人,也可以为动物等对象,具体地,对于目标对象和非替换对象的具体对象类型可以根据业务需求而定,本实施例对此不加以限制。
可以理解地,上述示例仅是为了更好地理解本申请实施例的技术方案而列举的示例,不作为对本实施例的唯一限制。
在需要对待处理图像进行处理时,可以获取待处理图像中的目标对象和待替换对象,在本示例中,可以先对待处理图像进行对象分割处理,然后结合对象尺寸和对象姿态信息,确定出待处理图像中的目标对象和待替换对象,具体地,可以结合下述具体实现方式进行详细描述。
在本申请实施例的一种具体实现方式中,上述步骤101可以包括:
子步骤A1:对所述待处理图像进行对象分割处理,获取所述待处理图像中的多个对象。
在本实施例中,在获取到待处理图像之后,可以对待处理图像中进行对象分割处理,以分割出待处理图像中的每个对象,即可以获取到待处理图像中的多个对象,及多个对象的对象姿态信息,具体地,可以采用预先训练的图像分割模型对待处理图像中的对象进行分割,以得到待处理图像中的多个对象。
当然,在实际应用中,也可以采用其它对象分割方式,如专业的图像分割工具等,具体地,对于图像中的对象分割方式可以根据业务需求而定,本实施例对此不加以限制。
在对待处理图像进行对象分割处理获取到待处理图像中的多个对象之后,执行子步骤A2。
子步骤A2:获取所述多个对象的对象姿态信息。
对象姿态信息是指用于指示对象的姿势(如站立、平躺等)和动静状态(如跑步、走路等)的信息。
在分割出待处理图像中的多个对象之后,可以获取多个对象的对象姿态信息。
在获取到多个对象的对象姿态信息之后,执行子步骤A3。
子步骤A3:根据所述多个对象的对象尺寸、尺寸阈值和所述对象姿态信息,确定所述多个对象中的目标对象和待替换对象。
在获取到多个对象的对象姿态信息之后,可以根据多个对象的对象尺寸、尺寸阈值和多个对象的对象姿态信息,确定出多个对象中的目标对象和待替换对象,具体地,可以结合下述具体实现方式进行详细描述。
在本申请的另一种具体实现方式中,上述子步骤A3可以包括:
子步骤B1:根据所述对象尺寸和所述尺寸阈值,确定所述多个对象中的待筛选对象和第一待替换对象。
在本实施例中,第一待替换对象是指结合对象尺寸和尺寸阈值对多个对象进行初步筛选之后,从多个对象中筛选出的待替换对象。
在获取到待处理图像中的多个对象之后,可以根据多个对象的对象尺寸和预先设置的尺寸阈值,从多个对象中筛选出待筛选对象和第一待替换对象,具体地,可以获取多个对象中对象尺寸大于或等于尺寸阈值的对象,并将对象尺寸大于或等于尺寸阈值的对象作为待筛选对象,并将多个对象中对象尺寸小于尺寸阈值的对象作为第一待替换对象。
在根据对象尺寸和尺寸阈值确定出多个对象中的待筛选对象和第一待替换对象之后,执行子步骤B2。
子步骤B2:根据预置主体对象识别模型和所述待筛选对象的对象姿态信息,获取所述待筛选对象中的目标对象和第二待替换对象。
第二待替换对象是指结合主体对象识别模型从待筛选对象中筛选出的待替换对象。
在获取到待筛选对象之后,可以根据预置主体对象识别模型和待筛选对象的对象姿态信息获取待筛选对象中的目标对象和第二待替换对象,例如,在获取到待筛选对象之后,可以将待筛选对象输入至预置主体对象识别模型,以对待筛选对象进行处理,以预置主体对象识别模型识别出待筛选对象中的主体对象,并将待筛选对象中除主体模型外的其它待筛选对象作为第二待替换对象。
子步骤B3:将所述第一待替换对象和所述第二待替换对象作为所述待替换对象。
在上述过程得到第一待替换对象和第二待替换对象之后,则可以将第一待替换对象和第二待替换对象视为待处理图像中的待替换对象。
本申请实施例通过采用结合对象尺寸和对象姿态信息确定待处理图像中的目标对象和待替换对象的方式,可以提高目标对象和待替换对象的选择精度,避免出现误选择待替换对象的情况。
在获取待处理图像中的目标对象和待替换对象之后,执行步骤102。
步骤102:根据所述待处理图像的图像场景信息和所述目标对象的对象姿态信息,确定所述待替换对象对应的替换对象。
图像场景信息是指待处理图像拍摄时的场景,如海边、篮球场、影院、草地等场景。
替换对象是指用于替换待处理图像中的待替换对象的对象,在本示例中,替换对象可以是与待替换对象类型不同的对象,例如,待替换对象为人,替换对象为动物等。
在获取待处理图像中的目标对象和待替换对象之后,可以获取待处理图像的图像场景信息,及待处理图像中的目标对象的对象姿态信息。进而,可以结合图像场景信息和目标对象的对象姿态信息,确定待替换对象对应的替换对象,例如,在待处理图像的图像场景信息为篮球场场景信息时,替换对象为某位篮球明星,而目标对象的对象姿态为投篮姿态时,那么该篮球明星的姿态即为投篮姿态,此时,可以将投篮姿态的篮球明星作为待替换对象对应的替换对象等。
对于根据待处理图像的图像场景信息和目标对象的对象姿态信息确定待替换对象对应的替换对象的过程,可以结合下述具体实现方式进行详细描述。
在本申请实施例的另一种具体实现方式中,上述步骤102可以包括:
子步骤C1:获取与所述图像场景信息对应的中间替换对象。
在本实施例中,中间替换对象是指获取的与待处理图像的图像场景信息匹配的图像。
在获取到待处理图像之后,可以获取待处理图像的图像场景信息,并获取与图像场景信息对应的中间替换对象,例如,在待处理图像的图像场景信息为篮球场场景信息时,替换对象可以为某位篮球明星。在待处理图像的图像场景信息为海滩场景信息时,替换对象可以为某种海洋动物(如海豚、金枪鱼等)等。
可以理解地,上述示例仅是为了更好地理解本申请实施例的技术方案而列举的示例,不作为对本实施例的唯一限制。
在获取到与待处理图像的图像场景信息对应的中间替换对象之后,执行子步骤C2。
子步骤C2:根据所述对象姿态信息,获取所述中间替换对象中与所述对象姿态信息匹配的替换对象。
在获取到与待处理图像的图像场景信息对应的中间替换对象之后,则可以根据对象姿态信息获取中间替换对象中与对象姿态信息匹配的替换对象,例如,在中间替换对象为篮球明星时,目标对象的对象姿态为投篮姿态,则该篮球明星的姿态即为投篮姿态,此时,可以将获取中间替换对象中投篮姿态的篮球明星作为替换对象等。
在本实施例中,可以根据待替换对象的对象姿态信息,获取中间替换对象与目标对象的相似度,然后,结合相似度从中间替换对象中筛选出替换对象,具体地,可以结合下述具体实现方式进行详细描述。
在本申请实施例的另一种具体实现方式中,上述子步骤C2可以包括:
子步骤D1:根据所述对象姿态信息,获取所述中间替换对象与所述目标对象的相似度。
在本实施例中,在获取到中间替换对象之后,可以根据对象姿态信息获取中间替换对象与目标对象的相似度,具体地,可以获取中间替换对象的对象姿态,并将中间替换对象的对象姿态与目标对象的对象姿态进行比对,以获取中间替换对象与目标对象的相似度。
在根据对象姿态信息获取到中间替换对象与目标对象的相似度之后,执行子步骤D2。
子步骤D2:获取所述中间替换对象中相似度最大的中间替换对象,并将所述相似度最大的中间替换对象作为所述替换对象。
在获取到中间替换对象与目标对象的相似度之后,则可以获取中间替换对象中相似度最大的中间替换对象,并将该相似度最大的中间替换对象作为待替换对象的替换对象。
本申请实施例通过结合图像场景信息和对象姿态信息获取待替换对象的替换对象,从而可以使得获取的替换对象与待处理图像中的主体对象更加吻合,从而可以提高生成的图像的图像质量。
在根据待处理图像的图像场景信息和目标对象的对象姿态信息确定出待替换对象对应的替换对象之后,执行步骤103。
步骤103:基于所述替换对象替换所述待处理图像中的待替换对象,生成目标图像。
在确定待替换对象对应的替换对象之后,可以基于替换对象替换待处理图像中的待替换对象,以生成目标图像,具体地,可以结合下述具体实现方式进行详细描述。
在本申请的另一种具体实现方式中,上述步骤103可以包括:
子步骤E1:基于所述替换对象替换所述待处理图像中的待替换对象,生成中间图像。
在本实施例中,中间图像是指在通过替换对象替换待处理图像中的待替换对象之后生成的图像。
在获取到待替换对象对应的替换对象之后,可以基于替换对象替换待处理图像中的待替换对象,从而可以生成中间图像。
在基于替换对象替换待处理图像中的待替换对象生成中间图像之后,执行子步骤E2。
子步骤E2:基于所述中间图像的图像背景信息,调整所述中间图像中的所述替换对象的对象参数,生成所述目标图像。
在生成中间图像之后,可以基于中间图像的图像背景信息调整中间图像中的替换对象的对象参数,以生成目标图像,具体地,可以结合图像背景信息调整替换对象的颜色、RGB等参数,以生成目标图像。
本申请实施例通过结合图像背景信息对替换对象的对象参数进行调整,从而可以使得生成的目标图像与原始图像的图像信息完美融合,提高了生成的目标图像的质量。
本申请实施例提供的图像生成方法,通过获取待处理图像中的目标对象和待替换对象,根据待处理图像的图像场景信息和目标对象的对象姿态信息,确定待替换对象对应的替换对象,并基于替换对象替换待处理图像中的待替换对象生成目标图像。本申请实施例通过结合待处理图像的图像场景和目标对象的姿态对图像中的待替换对象选定替换对象,并进行替换,无需用户逐个选定图像中的每个待替换对象,无需用户手动操作,极大地降低了图像处理时间,提高了用户体验。
需要说明的是,本申请实施例提供的图像生成方法,执行主体可以为图像生成装置,或者该图像生成装置中的用于执行图像生成方法的控制模块。本申请实施例中以图像生成装置执行图像生成方法为例,说明本申请实施例提供的图像生成装置。
参照图2,示出了本申请实施例提供的一种图像生成装置的结构示意图,如图2所示,该图像生成装置200可以包括如下模块:
目标对象获取模块210,用于获取待处理图像中的目标对象和待替换对象;
替换对象确定模块220,用于根据所述待处理图像的图像场景信息和所述目标对象的对象姿态信息,确定所述待替换对象对应的替换对象;
目标图像生成模块230,用于基于所述替换对象替换所述待处理图像中的待替换对象,生成目标图像。
可选地,所述目标对象获取模块210包括:
多个对象获取单元,用于对所述待处理图像进行对象分割处理,获取所述待处理图像中的多个对象;
对象姿态获取单元,用于获取所述多个对象的对象姿态信息;
目标对象替换单元,用于根据所述多个对象的对象尺寸、尺寸阈值和所述对象姿态信息,确定所述多个对象中的目标对象和待替换对象。
可选地,所述目标对象替换单元包括:
第一对象确定子单元,用于根据所述对象尺寸和所述尺寸阈值,确定所述多个对象中的待筛选对象和第一待替换对象;
第二对象确定子单元,用于根据预置主体对象识别模型和所述待筛选对象的对象姿态信息,获取所述待筛选对象中的目标对象和第二待替换对象;
待替换对象获取子单元,用于将所述第一待替换对象和所述第二待替换对象作为所述待替换对象。
可选地,所述第一对象确定子单元包括:
待筛选对象获取子单元,用于获取所述多个对象中对象尺寸大于或等于尺寸阈值的对象,并将所述对象尺寸大于或等于尺寸阈值的对象作为所述待筛选对象;
待替换对象确定子单元,用于获取所述多个对象中对象尺寸小于尺寸阈值的对象,并将所述对象尺寸小于尺寸阈值的对象作为所述待替换对象。
可选地,所述替换对象确定模块220包括:
中间替换对象获取单元,用于获取与所述图像场景信息对应的中间替换对象;
替换对象获取单元,用于根据所述对象姿态信息,获取所述中间替换对象中与所述对象姿态信息匹配的替换对象。
可选地,所述替换对象获取单元包括:
相似度获取子单元,用于根据所述对象姿态信息,获取所述中间替换对象与所述目标对象的相似度;
替换对象获取子单元,用于获取所述中间替换对象中相似度最大的中间替换对象,并将所述相似度最大的中间替换对象作为所述替换对象。
可选地,所述目标图像生成模块230包括:
中间图像生成单元,用于基于所述替换对象替换所述待处理图像中的待替换对象,生成中间图像;
目标图像生成单元,用于基于所述中间图像的图像背景信息,调整所述中间图像中的所述替换对象的对象参数,生成所述目标图像。
本申请实施例提供的图像生成装置,通过获取待处理图像中的目标对象和待替换对象,根据待处理图像的图像场景信息和目标对象的对象姿态信息,确定待替换对象对应的替换对象,并基于替换对象替换待处理图像中的待替换对象生成目标图像。本申请实施例通过结合待处理图像的图像场景和目标对象的姿态对图像中的待替换对象选定替换对象,并进行替换,无需用户逐个选定图像中的每个待替换对象,无需用户手动操作,极大地降低了图像处理时间,提高了用户体验。
本申请实施例中的图像生成装置可以是装置,也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备,也可以为非移动电子设备。示例性的,移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本或者个人数字助理(personaldigital assistant,PDA)等,非移动电子设备可以为服务器、网络附属存储器(NetworkAttached Storage,NAS)、个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的图像生成装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为ios操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
本申请实施例提供的图像生成装置能够实现图1的方法实施例实现的各个过程,为避免重复,这里不再赘述。
可选地,如图3所示,本申请实施例还提供一种电子设备300,包括处理器301,存储器302,存储在存储器302上并可在所述处理器301上运行的程序或指令,该程序或指令被处理器301执行时实现上述图像生成方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图4为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备400包括但不限于:射频单元401、网络模块402、音频输出单元403、输入单元404、传感器405、显示单元406、用户输入单元407、接口单元408、存储器409、以及处理器410等部件。
本领域技术人员可以理解,电子设备400还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器410逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图4中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,处理器410,用于获取待处理图像中的目标对象和待替换对象;根据所述待处理图像的图像场景信息和所述目标对象的对象姿态信息,确定所述待替换对象对应的替换对象;基于所述替换对象替换所述待处理图像中的待替换对象,生成目标图像。
本申请实施例通过结合待处理图像的图像场景和目标对象的姿态对图像中的待替换对象选定替换对象,并进行替换,无需用户逐个选定图像中的每个待替换对象,无需用户手动操作,极大地降低了图像处理时间,提高了用户体验。
可选地,处理器410,还用于对所述待处理图像进行对象分割处理,获取所述待处理图像中的多个对象;获取所述多个对象的对象姿态信息;根据所述多个对象的对象尺寸、尺寸阈值和所述对象姿态信息,确定所述多个对象中的目标对象和待替换对象。
可选地,处理器410,还用于根据所述对象尺寸和所述尺寸阈值,确定所述多个对象中的待筛选对象和第一待替换对象;根据预置主体对象识别模型和所述待筛选对象的对象姿态信息,获取所述待筛选对象中的目标对象和第二待替换对象;将所述第一待替换对象和所述第二待替换对象作为所述待替换对象。
可选地,处理器410,还用于获取所述多个对象中对象尺寸大于或等于尺寸阈值的对象,并将所述对象尺寸大于或等于尺寸阈值的对象作为所述待筛选对象;获取所述多个对象中对象尺寸小于尺寸阈值的对象,并将所述对象尺寸小于尺寸阈值的对象作为所述待替换对象。
可选地,处理器410,还用于获取与所述图像场景信息对应的中间替换对象;根据所述对象姿态信息,获取所述中间替换对象中与所述对象姿态信息匹配的替换对象。
可选地,处理器410,还用于根据所述对象姿态信息,获取所述中间替换对象与所述目标对象的相似度;获取所述中间替换对象中相似度最大的中间替换对象,并将所述相似度最大的中间替换对象作为所述替换对象。
可选地,处理器410,还用于基于所述替换对象替换所述待处理图像中的待替换对象,生成中间图像;基于所述中间图像的图像背景信息,调整所述中间图像中的所述替换对象的对象参数,生成所述目标图像。
本申请实施例通过结合图像背景信息对替换对象的对象参数进行调整,从而可以使得生成的目标图像与原始图像的图像信息完美融合,提高了生成的目标图像的质量。
应理解的是,本申请实施例中,输入单元404可以包括图形处理器(GraphicsProcessing Unit,GPU)4041和麦克风4042,图形处理器4041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元406可包括显示面板4061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板4061。用户输入单元407包括触控面板4071以及其他输入设备4072。触控面板4071,也称为触摸屏。触控面板4071可包括触摸检测装置和触摸控制器两个部分。其他输入设备4072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。存储器409可用于存储软件程序以及各种数据,包括但不限于应用程序和操作系统。处理器410可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器410中。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述图像生成方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等。
本申请实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述图像生成方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。

Claims (10)

1.一种图像生成方法,其特征在于,包括:
获取待处理图像中的目标对象和待替换对象;
根据所述待处理图像的图像场景信息和所述目标对象的对象姿态信息,确定所述待替换对象对应的替换对象;
基于所述替换对象替换所述待处理图像中的待替换对象,生成目标图像。
2.根据权利要求1所述的方法,其特征在于,所述获取待处理图像中的目标对象和待替换对象,包括:
对所述待处理图像进行对象分割处理,获取所述待处理图像中的多个对象;
获取所述多个对象的对象姿态信息;
根据所述多个对象的对象尺寸、尺寸阈值和所述对象姿态信息,确定所述多个对象中的目标对象和待替换对象。
3.根据权利要求2所述的方法,其特征在于,所述根据所述多个对象的对象尺寸、尺寸阈值和所述对象姿态信息,确定所述多个对象中的目标对象和待替换对象,包括:
根据所述对象尺寸和所述尺寸阈值,确定所述多个对象中的待筛选对象和第一待替换对象;
根据预置主体对象识别模型和所述待筛选对象的对象姿态信息,获取所述待筛选对象中的目标对象和第二待替换对象;
将所述第一待替换对象和所述第二待替换对象作为所述待替换对象。
4.根据权利要求3所述的方法,其特征在于,所述根据所述对象尺寸和所述尺寸阈值,确定所述多个对象中的待筛选对象和待替换对象,包括:
获取所述多个对象中对象尺寸大于或等于尺寸阈值的对象,并将所述对象尺寸大于或等于尺寸阈值的对象作为所述待筛选对象;
获取所述多个对象中对象尺寸小于尺寸阈值的对象,并将所述对象尺寸小于尺寸阈值的对象作为所述待替换对象。
5.根据权利要求1所述的方法,其特征在于,所述根据所述待处理图像的图像场景信息和所述目标对象的对象姿态信息,确定所述待替换对象对应的替换对象,包括:
获取与所述图像场景信息对应的中间替换对象;
根据所述对象姿态信息,获取所述中间替换对象中与所述对象姿态信息匹配的替换对象。
6.根据权利要求5所述的方法,其特征在于,所述根据所述对象姿态信息,获取所述中间替换对象中与所述对象姿态信息匹配的替换对象,包括:
根据所述对象姿态信息,获取所述中间替换对象与所述目标对象的相似度;
获取所述中间替换对象中相似度最大的中间替换对象,并将所述相似度最大的中间替换对象作为所述替换对象。
7.根据权利要求1所述的方法,其特征在于,所述基于所述替换对象替换所述待处理图像中的待替换对象,生成目标图像,包括:
基于所述替换对象替换所述待处理图像中的待替换对象,生成中间图像;
基于所述中间图像的图像背景信息,调整所述中间图像中的所述替换对象的对象参数,生成所述目标图像。
8.一种图像生成装置,其特征在于,包括:
目标对象获取模块,用于获取待处理图像中的目标对象和待替换对象;
替换对象确定模块,用于根据所述待处理图像的图像场景信息和所述目标对象的对象姿态信息,确定所述待替换对象对应的替换对象;
目标图像生成模块,用于基于所述替换对象替换所述待处理图像中的待替换对象,生成目标图像。
9.一种电子设备,其特征在于,包括处理器,存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求1-7中任一项所述的图像生成方法的步骤。
10.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求1-7中任一项所述的图像生成方法的步骤。
CN202110991615.5A 2021-08-26 2021-08-26 图像生成方法、装置、电子设备及可读存储介质 Active CN113709370B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110991615.5A CN113709370B (zh) 2021-08-26 2021-08-26 图像生成方法、装置、电子设备及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110991615.5A CN113709370B (zh) 2021-08-26 2021-08-26 图像生成方法、装置、电子设备及可读存储介质

Publications (2)

Publication Number Publication Date
CN113709370A true CN113709370A (zh) 2021-11-26
CN113709370B CN113709370B (zh) 2023-05-09

Family

ID=78655571

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110991615.5A Active CN113709370B (zh) 2021-08-26 2021-08-26 图像生成方法、装置、电子设备及可读存储介质

Country Status (1)

Country Link
CN (1) CN113709370B (zh)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2560610A1 (en) * 2005-09-21 2007-03-21 Horticultural Asset Management, Inc. System and method for determining current replacement values for new or existing landscape architectural objects
US20080019576A1 (en) * 2005-09-16 2008-01-24 Blake Senftner Personalizing a Video
CN101119443A (zh) * 2002-05-28 2008-02-06 卡西欧计算机株式会社 合成图像传送设备以及方法
CN108288249A (zh) * 2018-01-25 2018-07-17 北京览科技有限公司 一种用于替换视频中的对象的方法和装置
CN108520493A (zh) * 2018-03-30 2018-09-11 广东欧珀移动通信有限公司 图像替换的处理方法、装置、存储介质及电子设备
WO2019092445A1 (en) * 2017-11-10 2019-05-16 Raymond John Hudson Image replacement system
US20190279020A1 (en) * 2018-03-12 2019-09-12 Steeringz, Inc. Landscape video stream compression using computer vision techniques
CN111093025A (zh) * 2019-12-30 2020-05-01 维沃移动通信有限公司 一种图像处理方法及电子设备
CN112102149A (zh) * 2019-06-18 2020-12-18 北京陌陌信息技术有限公司 基于神经网络的人物发型替换方法、装置、设备和介质
CN112367465A (zh) * 2020-10-30 2021-02-12 维沃移动通信有限公司 图像输出方法、装置及电子设备
CN113096000A (zh) * 2021-03-31 2021-07-09 商汤集团有限公司 一种图像生成方法、装置、设备及存储介质

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101119443A (zh) * 2002-05-28 2008-02-06 卡西欧计算机株式会社 合成图像传送设备以及方法
US20080019576A1 (en) * 2005-09-16 2008-01-24 Blake Senftner Personalizing a Video
CA2560610A1 (en) * 2005-09-21 2007-03-21 Horticultural Asset Management, Inc. System and method for determining current replacement values for new or existing landscape architectural objects
WO2019092445A1 (en) * 2017-11-10 2019-05-16 Raymond John Hudson Image replacement system
CN108288249A (zh) * 2018-01-25 2018-07-17 北京览科技有限公司 一种用于替换视频中的对象的方法和装置
US20190279020A1 (en) * 2018-03-12 2019-09-12 Steeringz, Inc. Landscape video stream compression using computer vision techniques
CN108520493A (zh) * 2018-03-30 2018-09-11 广东欧珀移动通信有限公司 图像替换的处理方法、装置、存储介质及电子设备
CN112102149A (zh) * 2019-06-18 2020-12-18 北京陌陌信息技术有限公司 基于神经网络的人物发型替换方法、装置、设备和介质
CN111093025A (zh) * 2019-12-30 2020-05-01 维沃移动通信有限公司 一种图像处理方法及电子设备
CN112367465A (zh) * 2020-10-30 2021-02-12 维沃移动通信有限公司 图像输出方法、装置及电子设备
CN113096000A (zh) * 2021-03-31 2021-07-09 商汤集团有限公司 一种图像生成方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN113709370B (zh) 2023-05-09

Similar Documents

Publication Publication Date Title
CN112333385B (zh) 电子防抖控制方法及装置
CN112422817B (zh) 图像处理方法及装置
CN111835982B (zh) 图像获取方法、图像获取装置、电子设备及存储介质
CN112422798A (zh) 拍照方法、装置、电子设备和存储介质
CN111866378A (zh) 图像处理方法、装置、设备及介质
CN112511743B (zh) 视频拍摄方法和装置
CN113709368A (zh) 图像显示方法、装置及设备
CN112734661A (zh) 图像处理方法及装置
CN112419218A (zh) 图像处理方法、装置及电子设备
CN111835937A (zh) 图像处理方法、装置及电子设备
WO2023001110A1 (zh) 神经网络训练方法、装置及电子设备
CN113794831B (zh) 视频拍摄方法、装置、电子设备及介质
CN113709370B (zh) 图像生成方法、装置、电子设备及可读存储介质
CN115439386A (zh) 图像融合方法、装置、电子设备和存储介质
CN112383708B (zh) 拍摄方法、装置、电子设备及可读存储介质
CN114125226A (zh) 图像拍摄方法、装置、电子设备和可读存储介质
CN114299014A (zh) 图像处理架构、方法、电子设备及存储介质
CN113962840A (zh) 图像处理方法、装置、电子设备及存储介质
CN112150486A (zh) 图像处理方法及装置
CN113347356A (zh) 拍摄方法、装置、电子设备及存储介质
CN113473012A (zh) 虚化处理方法、装置和电子设备
CN112511890A (zh) 视频图像处理方法、装置及电子设备
CN112367464A (zh) 图像输出方法、装置及电子设备
CN113489901B (zh) 拍摄方法及其装置
CN112367470B (zh) 图像处理方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant