CN111640166A - 一种ar合影方法、装置、计算机设备及存储介质 - Google Patents
一种ar合影方法、装置、计算机设备及存储介质 Download PDFInfo
- Publication number
- CN111640166A CN111640166A CN202010515019.5A CN202010515019A CN111640166A CN 111640166 A CN111640166 A CN 111640166A CN 202010515019 A CN202010515019 A CN 202010515019A CN 111640166 A CN111640166 A CN 111640166A
- Authority
- CN
- China
- Prior art keywords
- image
- human body
- group photo
- target
- template image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 73
- 230000000694 effects Effects 0.000 claims abstract description 23
- 230000011218 segmentation Effects 0.000 claims description 40
- 238000012545 processing Methods 0.000 claims description 22
- 238000004590 computer program Methods 0.000 claims description 11
- 238000012544 monitoring process Methods 0.000 claims description 8
- 230000004044 response Effects 0.000 claims description 3
- 230000008569 process Effects 0.000 abstract description 17
- 238000010586 diagram Methods 0.000 description 10
- 238000005516 engineering process Methods 0.000 description 7
- 241000264060 Lethrinus Species 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000035800 maturation Effects 0.000 description 1
- 238000013508 migration Methods 0.000 description 1
- 230000005012 migration Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 231100000289 photo-effect Toxicity 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Image Analysis (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本公开提供了一种AR合影方法、装置、计算机设备及存储介质，其方法包括：获取包含人体的待处理图像，并从所述待处理图像中截取人体影像；响应对原始AR模板图像中多个历史名人的选择信息，基于与所述选择信息对应的目标历史名人、以及所述原始AR模板图像，生成去除了所述目标历史名人的目标AR模板图像；基于与所述选择信息对应的模板人物在所述AR模板图像中的第一位置信息，确定所述人体影像在所述目标AR模板图像中的第二位置信息；基于所述第二位置信息，将所述目标AR模板图像、与所述人体影像融合，生成AR合影。本公开实施例通过用户主动控制目标AR模板图像，来控制生成AR合影的最终效果，提高了在AR合影过程中的交互性。
Description
技术领域
本公开涉及图像处理技术领域，具体而言，涉及一种AR合影方法、装置、计算机设备及存储介质。
背景技术
随着增强现实(Augmented Reality，AR)技术的不断成熟，AR技术越来越多地应用于各个行业，如教育、培训、医疗、设计等，为使用者提供了许多新奇的体验。其中，AR合影技术已经相对成熟，例如可以将AR图像与人体图像相结合，营造出一种合影的效果。
但是，目前AR合影中的AR特效都是预先设置好的，用户只能基于预先设置好的AR特效实现AR合影，交互性较差。
发明内容
本公开实施例至少提供一种AR合影方法、装置、计算机设备及存储介质。
第一方面，本公开实施例提供了一种AR合影方法，所述AR合影方法包括：
获取包含人体的待处理图像，并从所述待处理图像中截取人体影像；
响应对原始AR模板图像中多个历史名人的选择信息，基于与所述选择信息对应的目标历史名人、以及所述原始AR模板图像，生成去除了所述目标历史名人的目标AR模板图像；
基于与所述选择信息对应的模板人物在所述AR模板图像中的第一位置信息，确定所述人体影像在所述目标AR模板图像中的第二位置信息；
基于所述第二位置信息，将所述目标AR模板图像、与所述人体影像融合，生成AR合影。
一种可选的实施方式中，所述从所述待处理图像中截取人体影像，包括：
利用预先训练的语义分割模型，对所述待处理图像进行语义分割处理，得到所述待处理图像的语义分割处理结果；其中，所述语义分割处理结果包括：用于指示所述待处理图像中每一个像素点是否属于人体的指示信息；
基于所述待处理图像的语义分割结果，从所述待处理图像截取所述人体影像。
一种可选的实施方式中，采用下述方式生成所述原始AR模板图像：
基于包括多个历史名人的照片，生成所述原始AR模板图像；
或者，
基于预设的特征信息，确定多个具有与所述特征信息对应特征的历史人物；并基于包含所述历史人物的画像，生成所述原始AR模板图像。
一种可选的实施方式中，所述AR合影方法还包括：确定与所述目标历史名人对应的AR特效；
所述基于所述第二位置信息，将所述目标AR模板图像、与所述人体影像融合，生成AR合影，包括：
所述基于所述第二位置信息，将所述目标AR模板图像、与所述目标历史名人对应的AR特效、以及所述人体影像融合，生成AR合影。
一种可选的实施方式中，所述AR合影方法还包括：
将所述AR合影存储至预设存储位置，并通过显示屏幕向用户展示用于访问所述预设存储位置的二维码。
一种可选的实施方式中，所述获取包含人体的待处理图像，包括：
实时监测在预设区域范围内是否存在人体；
若检测到在预设区域范围内存在所述人体，则针对所述预设区域范围，获取所述待处理图像。
第二方面，本公开实施例提供了一种AR合影装置，所述AR合影装置包括：
获取模块，由于获取包含人体的待处理图像，并从所述待处理图像中截取人体影像；
第一生成模块，用于响应对原始AR模板图像中多个历史名人的选择信息，基于与所述选择信息对应的目标历史名人、以及所述原始AR模板图像，生成去除了所述目标历史名人的目标AR模板图像；
第一确定模块，用于基于与所述选择信息对应的模板人物在所述AR模板图像中的第一位置信息，确定所述人体影像在所述目标AR模板图像中的第二位置信息；
第二生成模块，用于基于所述第二位置信息，将所述目标AR模板图像、与所述人体影像融合，生成AR合影。
一种可选的实施方式中，所述获取模块具体用于：
利用预先训练的语义分割模型，对所述待处理图像进行语义分割处理，得到所述待处理图像的语义分割处理结果；其中，所述语义分割处理结果包括：用于指示所述待处理图像中每一个像素点是否属于人体的指示信息；
基于所述待处理图像的语义分割结果，从所述待处理图像截取所述人体影像。
一种可选的实施方式中，采用下述方式生成所述原始AR模板图像：
基于包括多个历史名人的照片，生成所述原始AR模板图像；
或者，
基于预设的特征信息，确定多个具有与所述特征信息对应特征的历史人物；并基于包含所述历史人物的画像，生成所述原始AR模板图像。
一种可选的实施方式中，所述AR合影装置还包括：
第二确定模块，用于确定与所述目标历史名人对应的AR特效；
所述第二生成模块具体用于：
所述基于所述第二位置信息，将所述目标AR模板图像、与所述目标历史名人对应的AR特效、以及所述人体影像融合，生成AR合影。
一种可选的实施方式中，所述AR合影装置还包括：
存储模块，用于将所述AR合影存储至预设存储位置，并通过显示屏幕向用户展示用于访问所述预设存储位置的二维码。
一种可选的实施方式中，所述获取模块还用于：
实时监测在预设区域范围内是否存在人体；
若检测到在预设区域范围内存在所述人体，则针对所述预设区域范围，获取所述待处理图像。
第三方面，本公开实施例还提供一种计算机设备，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，当计算机设备运行时，所述处理器与所述存储器之间通过总线通信，所述机器可读指令被所述处理器执行时执行上述第一方面，或第一方面中任一种可能的实施方式中的步骤。
第四方面，本公开实施例还提供一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行上述第一方面，或第一方面中任一种可能的实施方式中的步骤。
本公开实施例通过从包含人体的待处理图像中截取人体影像，并响应对原始AR模板图像中多个历史名人的选择信息，基于与选择信息对应的目标历史名人、以及原始AR模板图像，生成去除了目标历史名人的目标AR模板图像；后基于与选择信息对应的模板人物在AR模板图像中的第一位置信息，确定人体影像在目标AR模板图像中的第二位置信息，并基于第二位置信息，将目标AR模板图像、与人体影像融合，生成AR合影，从而实现了通过用户主动控制目标AR模板图像，来控制生成AR合影的最终效果，提高了在AR合影过程中的交互性。
为使本公开的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，此处的附图被并入说明书中并构成本说明书中的一部分，这些附图示出了符合本公开的实施例，并与说明书一起用于说明本公开的技术方案。应当理解，以下附图仅示出了本公开的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
图1示出了本公开实施例所提供的一种AR合影方法的流程图；
图2a示出了本公开实施例所提供的生成目标AR模板图像具体示例图；
图2b示出了本公开实施例所提供的生成AR合影的具体示例图；
图3示出了本公开实施例所提供的一种AR合影装置的示意图；
图4示出了本公开实施例所提供的另一种AR合影装置的示意图；
图5示出了本公开实施例所提供的一种计算机设备的示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚，下面将结合本公开实施例中附图，对本公开实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本公开一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围，而是仅仅表示本公开的选定实施例。基于本公开的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本公开保护的范围。
经研究发现，目前AR图像都是全部设定或部分设定好的，用户通常只能对一些细节进行调节，无法依据自身喜好确定要与其合影的AR图像，人机互动性较差。
基于上述研究，本公开实施例提供了一种AR合影方法，通过用户主动控制目标AR模板图像，来控制生成AR合影的最终效果，提高了在AR合影过程中的交互性。
针对以上方案所存在的缺陷，均是发明人在经过实践并仔细研究后得出的结果，因此，上述问题的发现过程以及下文中本公开针对上述问题所提出的解决方案，都应该是发明人在本公开过程中对本公开做出的贡献。
应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。
为便于对本实施例进行理解，首先对本公开实施例所公开的一种AR合影方法进行详细介绍，本公开实施例所提供的AR合影方法的执行主体一般为具有一定计算能力的AR合影设备，该AR合影设备例如包括：终端设备或服务器或其它处理设备，终端设备可以为用户设备(User Equipment，UE)、移动设备、用户终端、终端、蜂窝电话、无绳电话、个人数字处理(Personal Digital Assistant，PDA)、手持设备、计算设备、车载设备、可穿戴设备等。在一些可能的实现方式中，该AR合影方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。
下面以执行主体为AR合影设备为例对本公开实施例提供的AR合影方法加以说明。
参见图1所示，为本公开实施例提供的AR合影方法的流程图，所述方法包括步骤S101～S104，其中：
S101：获取包含人体的待处理图像，并从所述待处理图像中截取人体影像；
S102：响应对原始AR模板图像中多个历史名人的选择信息，基于与所述选择信息对应的目标历史名人、以及所述原始AR模板图像，生成去除了所述目标历史名人的目标AR模板图像；
S103：基于与所述选择信息对应的模板人物在所述AR模板图像中的第一位置信息，确定所述人体影像在所述目标AR模板图像中的第二位置信息；
S104：基于所述第二位置信息，将所述目标AR模板图像、与所述人体影像融合，生成AR合影。
本公开实施例通过从包含人体的待处理图像中截取人体影像，并响应对原始AR模板图像中多个历史名人的选择信息，基于与选择信息对应的目标历史名人、以及原始AR模板图像，生成去除了目标历史名人的目标AR模板图像；后基于与选择信息对应的模板人物在AR模板图像中的第一位置信息，确定人体影像在目标AR模板图像中的第二位置信息，并基于第二位置信息，将目标AR模板图像、与人体影像融合，生成AR合影，从而实现了通过用户主动控制目标AR模板图像，来控制生成AR合影的最终效果，提高了在AR合影过程中的交互性。
下面分别对上述S101～S104加以详细说明。
一：在上述S101中，待处理图像中所包括的人体可以有一个，也可以有多个。
具体地，在获取包含人体的待处理图像之前，还可以包括下述过程，包括：
实时监测在预设区域范围内是否存在人体。
在实时检测预设区域范围内是否存在人体的规程中，若检测到在预设区域范围内存在所述人体，则针对所述预设区域范围，获取所述待处理图像。
具体的，针对一展示屏幕，可以设定一位于现实场景中预设区域范围，通过检测该预设区域范围内是否存在人体，触发获取待处理图像的操作。
示例性的，可以在展示屏幕的预设区域范围的地面，设置一压力传感器，在用户处于该预设区域范围时，压力传感器便会感应到压力变化，从而监测出在预设区域范围内存在人体。或者，在展示屏幕附近的预设空间内，设置一红外探测仪，当用户进入到预设区域内时，红外探测器便会感应到温度变化，从而监测出在预设区域范围内存在人体，此外，还包括，雷达检测、声波检测等多种方法，再次不做赘述。
在监测到在预设区域范围内存在人体之后，便可以针对所述预设区域范围，获取所述待处理图像。
具体的，所述人体的待处理图像可以通过摄像头获得，该摄像头可以设置于展示屏幕上方、两侧、或者前方等任一位置，可以是与展示屏幕物理分离的摄像头，也可以是非物理分离的摄像头；另外，摄像头例如还可以设置于展示屏幕下，通过屏下拍摄技术，获取人体图像。在采用屏下拍摄技术的情况下，还可以设置一与摄像头联动的图像检测器，用于判断用户距离摄像头的远近高低，当判断摄像头的当前高度针对用户获取待处理图像时的效果较差时，可以调整摄像头的高低，在判断出用户距离不适合时，例如用户距离过远可能导致人体影像过小，用户距离过近可能导致人体影像在待处理图像中残缺的问题，此时可以在显示屏幕上显示出提示信息，用于提醒用户进行相应的位置移动。
此外，所述摄像头例如可以处于休眠状态，当监测到在预设区域范围内存在人体之后，才会从休眠状态被唤醒，开始采集待处理图像；所述摄像头还可以在监测到在预设区域范围内存在人体之后，开启并在采集待处理图像，在一定程度，可以节省电能，同时减少摄像头开启时间，使得摄像头的使用寿命更长。
由于采集的图像中包括了摄像头的拍摄视野范围内的全部影响，但是在合影过程中，往往不需要用户周围环境、或者背景影响，因此需要对获取到的待处理图像进行处理，以从待处理图像中提取出后续AR合影生成过程中所需的人体影像。
从所述待处理图像中截取人体影像的方法例如包括：
利用预先训练的语义分割模型，对所述待处理图像进行语义分割处理，得到所述待处理图像的语义分割处理结果；其中，所述语义分割处理结果包括：用于指示所述待处理图像中每一个像素点是否属于人体的指示信息；
基于所述待处理图像的语义分割结果，从所述待处理图像截取所述人体影像。
其中，所述语义分割模型的训练方法可以包括：利用待训练的语义分割模型，对样本图像进行语义分割处理，得到样本图像的语义分割结果；根据样本图像的语义分割结果，以及样本图像的语义分割标注信息，得到待训练的语义分割模型的模型损失，基于该损失，优化待训练的语义分割模型的参数；经过对待训练的语义分割模型的参数的多轮优化，得到训练后的语义分割模型。
二：在上述S102中，所述原始AR模板图像可以为：
基于包括多个历史名人的照片，生成所述原始AR模板图像；
或者，
基于预设的特征信息，确定多个具有与所述特征信息对应特征的历史人物；并基于包含所述历史人物的画像，生成所述原始AR模板图像。
在一种可实施的方法中，可以选取一历史照片，例如：英国王室合影、抗战胜利纪念照片等，将其转化为AR模板图像。在这里，由于一些照片历史较为悠久，还可以利用人工智能(Artificial Intelligence，AI)修复方法，对照片进行修复，以更为清晰地展示该照片。
另外，在将其转化为AR模板图像的过程中，例如可以对历史照片进行一定的风格迁移处理，使得历史照片能够呈现出区别于原始照片的风格。在另一种可实施的方法中，还可以利用图像拼接技术，对多个历史人物的影像进行拼接，得到AR模板图像，例如将某个朝代的历代皇帝的影像拼接在一起，生成原始AR模版图像，这样既满足了用户对于与不同名人合影的想法，也增加了互动趣味性。
为了使得用户可以与原始AR模板图像进行合影，则需要在原始AR模板图像中选取一位置，用于显示用户图像。
参见图2a，图2a示出了本公开实施例所提供的生成目标AR模板图像具体示例图。在该示例中，21表示用户选定的目标历史名人在AR模板图像中的影像；22表示其他历史名人在AR模板图像中的影像。
具体的，在用户开始进行AR合影之后，所述展示屏幕上可以显示出多个用户界面(User Interface，UI)标识，用于对应不同的历史人物。该UI标识可以为醒目显示的提示框，或是数字、字母标识等。用户可以通过点击选取对应的UI标识从而去除掉不想在合影中显示的目标历史名人的影像。
如图2a所示，在该实例中，当响应对原始AR模板图像中多个历史名人的选择信息之后，所述目标历史名人在目标AR模板图像中的影像可以为空白，或者显示虚线框表明该历史人物被选择，以及将要被去除的信息。
三：在上述S103中，在一种可能的实施例中，在确定出去除的历史人物对应的目标AR模板图像之后，便可以在该位置出显示出获取到的人体影像。
在一种可能的实施例中，在确定出去除的历史人物对应的目标AR模板图像之后，还可以依据用户的人体影像的高度、体态等信息，选取在与所述选择信息对应的目标历史人物在所述AR模板图像中的第一位置附近的第二位置处显示人体影像。
四：在上述S104中，在该步骤中，在基于目标历史名人对应的AR模版图像，及人体影像进行合影的过程中，还可以包括：确定与所述目标历史名人对应的AR特效。
参加图2b，图2b示出了本公开实施例所提供的生成AR合影的具体示例图。在该示例中，22表示其他历史名人在AR模板图像中的影像；22表示人体影像。
示例性的，以与多位皇帝合影为例，可以在皇帝的头像下面展示处对应的王冠、龙袍等标志性服饰配饰的AR特效，还可以标注其对应的名字、名号等AR特效，还可以在皇帝的头像位置处展示一些现代的配件的AR特效，例如墨镜、项链等，增加合影的趣味性，同时增加与用户之间的互动性。
在所述基于所述第二位置信息，将所述目标AR模板图像、与所述目标历史名人对应的AR特效、以及所述人体影像融合，生成AR合影的过程中，还可以对其他历史名人的AR模板图以及人体影像的分辨率、清晰度、色调等信息进行统一调整，以增加生成合影的真实度，最大可能地减少其他历史名人的AR模板图与人体影像之间的违和感。
在本公开的另一实施例中，所述AR合影方法还包括：
将所述AR合影存储至预设存储位置，并通过显示屏幕向用户展示用于访问所述预设存储位置的二维码。
在生成合影图片之后，首先，可以现将合影存储在缓存中或其他特定位置当中，同时在展示屏幕上显示一二维码。用户可以通过扫描该二维码，在移动端查看该AR合影，并在移动端进行下载或打印操作。在用户查看之后，可以对该合影进行删除；若一用户只是想要体验合影的过程，而并没有在移动端查看该合影，则合影设备可以基于预设时间或在下一次进行合影时，对缓存的合影进行删除，以节省内存，确保合影设备的运行流畅性。
本领域技术人员可以理解，在具体实施方式的上述方法中，各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定，各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
基于同一发明构思，本公开实施例中还提供了与AR合影方法对应的AR合影装置，由于本公开实施例中的装置解决问题的原理与本公开实施例上述AR合影方法相似，因此装置的实施可以参见方法的实施，重复之处不再赘述。
参照图3、4所示，图3为本公开实施例提供的一种AR合影装置的示意图；图4为本公开实施例提供的另一种AR合影装置的示意图。所述AR合影装置包括：获取模块310、第一生成模块320、第一确定模块330以及第二生成模块340，其中：
获取模块310，由于获取包含人体的待处理图像，并从所述待处理图像中截取人体影像；
第一生成模块320，用于响应对原始AR模板图像中多个历史名人的选择信息，基于与所述选择信息对应的目标历史名人、以及所述原始AR模板图像，生成去除了所述目标历史名人的目标AR模板图像；
第一确定模块330，用于基于与所述选择信息对应的模板人物在所述AR模板图像中的第一位置信息，确定所述人体影像在所述目标AR模板图像中的第二位置信息；
第二生成模块340，用于基于所述第二位置信息，将所述目标AR模板图像、与所述人体影像融合，生成AR合影。
本公开实施例通过用户主动控制目标AR模板图像，来控制生成AR合影的最终效果，提高了在AR合影过程中的交互性
一种可选的实施方式中，所述获取模块310具体用于：
利用预先训练的语义分割模型，对所述待处理图像进行语义分割处理，得到所述待处理图像的语义分割处理结果；其中，所述语义分割处理结果包括：用于指示所述待处理图像中每一个像素点是否属于人体的指示信息；
基于所述待处理图像的语义分割结果，从所述待处理图像截取所述人体影像。
一种可选的实施方式中，采用下述方式生成所述原始AR模板图像：
基于包括多个历史名人的照片，生成所述原始AR模板图像；
或者，
基于预设的特征信息，确定多个具有与所述特征信息对应特征的历史人物；并基于包含所述历史人物的画像，生成所述原始AR模板图像。
一种可选的实施方式中，如图4所示，所述AR合影装置还包括：
第二确定模块350，用于确定与所述目标历史名人对应的AR特效；
所述第二生成模块340具体用于：
所述基于所述第二位置信息，将所述目标AR模板图像、与所述目标历史名人对应的AR特效、以及所述人体影像融合，生成AR合影。
一种可选的实施方式中，所述AR合影装置还包括：
存储模块360，用于将所述AR合影存储至预设存储位置，并通过显示屏幕向用户展示用于访问所述预设存储位置的二维码。
一种可选的实施方式中，所述获取模块310还用于：
实时监测在预设区域范围内是否存在人体；
若检测到在预设区域范围内存在所述人体，则针对所述预设区域范围，获取所述待处理图像。
本公开实施例还提供了一种计算机设备，如图5所示，为本公开实施例提供的计算机设备结构示意图，包括：
处理器11和存储器12；所述存储器12存储有所述处理器11可执行的机器可读指令，当计算机设备运行时，所述机器可读指令被所述处理器执行以实现下述步骤：
获取包含人体的待处理图像，并从所述待处理图像中截取人体影像；
响应对原始AR模板图像中多个历史名人的选择信息，基于与所述选择信息对应的目标历史名人、以及所述原始AR模板图像，生成去除了所述目标历史名人的目标AR模板图像；
基于与所述选择信息对应的模板人物在所述AR模板图像中的第一位置信息，确定所述人体影像在所述目标AR模板图像中的第二位置信息；
基于所述第二位置信息，将所述目标AR模板图像、与所述人体影像融合，生成AR合影。
一种可选的实施方式中，处理器11执行的指令中，所述从所述待处理图像中截取人体影像，包括：
利用预先训练的语义分割模型，对所述待处理图像进行语义分割处理，得到所述待处理图像的语义分割处理结果；其中，所述语义分割处理结果包括：用于指示所述待处理图像中每一个像素点是否属于人体的指示信息；
基于所述待处理图像的语义分割结果，从所述待处理图像截取所述人体影像。
一种可选的实施方式中，处理器11执行的指令中，采用下述方式生成所述原始AR模板图像：
基于包括多个历史名人的照片，生成所述原始AR模板图像；
或者，
基于预设的特征信息，确定多个具有与所述特征信息对应特征的历史人物；并基于包含所述历史人物的画像，生成所述原始AR模板图像。
一种可选的实施方式中，处理器11执行的指令中，所述AR合影方法还包括：确定与所述目标历史名人对应的AR特效；
所述基于所述第二位置信息，将所述目标AR模板图像、与所述人体影像融合，生成AR合影，包括：
所述基于所述第二位置信息，将所述目标AR模板图像、与所述目标历史名人对应的AR特效、以及所述人体影像融合，生成AR合影。
一种可选的实施方式中，处理器11执行的指令中，所述AR合影方法还包括：
将所述AR合影存储至预设存储位置，并通过显示屏幕向用户展示用于访问所述预设存储位置的二维码。
一种可选的实施方式中，处理器11执行的指令中，所述获取包含人体的待处理图像，包括：
实时监测在预设区域范围内是否存在人体；
若检测到在预设区域范围内存在所述人体，则针对所述预设区域范围，获取所述待处理图像。
本公开实施例还提供一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行上述方法实施例中所述的AR合影方法的步骤。其中，该存储介质可以是易失性或非易失的计算机可读取存储介质。
本公开实施例所提供的AR合影方法的计算机程序产品，包括存储了程序代码的计算机可读存储介质，所述程序代码包括的指令可用于执行上述方法实施例中所述的AR合影方法的步骤，具体可参见上述方法实施例，在此不再赘述。
本公开实施例还提供一种计算机程序，该计算机程序被处理器执行时实现前述实施例的任意一种方法。该计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中，所述计算机程序产品具体体现为计算机存储介质，在另一个可选实施例中，计算机程序产品具体体现为软件产品，例如软件开发包(Software DevelopmentKit，SDK)等等。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统和装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。在本公开所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本公开各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解，本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-OnlyMemory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是：以上所述实施例，仅为本公开的具体实施方式，用以说明本公开的技术方案，而非对其限制，本公开的保护范围并不局限于此，尽管参照前述实施例对本公开进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本公开揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本公开实施例技术方案的精神和范围，都应涵盖在本公开的保护范围之内。因此，本公开的保护范围应所述以权利要求的保护范围为准。
Claims (10)
1.一种AR合影方法，其特征在于，所述AR合影方法包括：
获取包含人体的待处理图像，并从所述待处理图像中截取人体影像；
响应对原始AR模板图像中多个历史名人的选择信息，基于与所述选择信息对应的目标历史名人、以及所述原始AR模板图像，生成去除了所述目标历史名人的目标AR模板图像；
基于与所述选择信息对应的模板人物在所述AR模板图像中的第一位置信息，确定所述人体影像在所述目标AR模板图像中的第二位置信息；
基于所述第二位置信息，将所述目标AR模板图像、与所述人体影像融合，生成AR合影。
2.根据权利要求1所述的AR合影方法，其特征在于，所述从所述待处理图像中截取人体影像，包括：
利用预先训练的语义分割模型，对所述待处理图像进行语义分割处理，得到所述待处理图像的语义分割处理结果；其中，所述语义分割处理结果包括：用于指示所述待处理图像中每一个像素点是否属于人体的指示信息；
基于所述待处理图像的语义分割结果，从所述待处理图像截取所述人体影像。
3.根据权利要求1或2所述的AR合影方法，其特征在于，采用下述方式生成所述原始AR模板图像：
基于包括多个历史名人的照片，生成所述原始AR模板图像；
或者，
基于预设的特征信息，确定多个具有与所述特征信息对应特征的历史人物；并基于包含所述历史人物的画像，生成所述原始AR模板图像。
4.根据权利要求1-3任一项所述的AR合影方法，其特征在于，所述AR合影方法还包括：确定与所述目标历史名人对应的AR特效；
所述基于所述第二位置信息，将所述目标AR模板图像、与所述人体影像融合，生成AR合影，包括：
所述基于所述第二位置信息，将所述目标AR模板图像、与所述目标历史名人对应的AR特效、以及所述人体影像融合，生成AR合影。
5.根据权利要求1-4任一项所述的AR合影方法，其特征在于，所述AR合影方法还包括：
将所述AR合影存储至预设存储位置，并通过显示屏幕向用户展示用于访问所述预设存储位置的二维码。
6.根据权利要求1-5任一项所述的AR合影方法，其特征在于，所述获取包含人体的待处理图像，包括：
实时监测在预设区域范围内是否存在人体；
若检测到在预设区域范围内存在所述人体，则针对所述预设区域范围，获取所述待处理图像。
7.一种AR合影装置，其特征在于，所述AR合影装置包括：
获取模块，由于获取包含人体的待处理图像，并从所述待处理图像中截取人体影像；
第一生成模块，用于响应对原始AR模板图像中多个历史名人的选择信息，基于与所述选择信息对应的目标历史名人、以及所述原始AR模板图像，生成去除了所述目标历史名人的目标AR模板图像；
第一确定模块，用于基于与所述选择信息对应的模板人物在所述AR模板图像中的第一位置信息，确定所述人体影像在所述目标AR模板图像中的第二位置信息；
第二生成模块，用于基于所述第二位置信息，将所述目标AR模板图像、与所述人体影像融合，生成AR合影。
8.根据权利要求7所述的AR合影装置，其特征在于，所述AR合影装置还包括：
存储模块，用于将所述AR合影存储至预设存储位置，并通过显示屏幕向用户展示用于访问所述预设存储位置的二维码。
9.一种计算机设备，其特征在于，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，当计算机设备运行时，所述处理器与所述存储器之间通过总线通信，所述机器可读指令被所述处理器执行时执行如权利要求1至6任一所述的AR合影方法的步骤。
10.一种计算机可读存储介质，其特征在于，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行如权利要求1至6任一所述的AR合影方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010515019.5A CN111640166B (zh) | 2020-06-08 | 2020-06-08 | 一种ar合影方法、装置、计算机设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010515019.5A CN111640166B (zh) | 2020-06-08 | 2020-06-08 | 一种ar合影方法、装置、计算机设备及存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111640166A true CN111640166A (zh) | 2020-09-08 |
| CN111640166B CN111640166B (zh) | 2024-03-26 |
Family
ID=72330595
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010515019.5A Active CN111640166B (zh) | 2020-06-08 | 2020-06-08 | 一种ar合影方法、装置、计算机设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111640166B (zh) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112153422A (zh) * | 2020-09-25 | 2020-12-29 | 连尚(北京)网络科技有限公司 | 视频融合方法和设备 |
| CN112598803A (zh) * | 2020-12-15 | 2021-04-02 | 中国建筑西南设计研究院有限公司 | 一种景区ar合影方法 |
| CN112906467A (zh) * | 2021-01-15 | 2021-06-04 | 深圳市慧鲤科技有限公司 | 合影图像生成方法及装置、电子设备和存储介质 |
| CN112991157A (zh) * | 2021-03-30 | 2021-06-18 | 北京市商汤科技开发有限公司 | 图像处理方法、装置、电子设备及存储介质 |
| CN113012040A (zh) * | 2021-03-30 | 2021-06-22 | 北京市商汤科技开发有限公司 | 图像处理方法、装置、电子设备及存储介质 |
| CN113012039A (zh) * | 2021-03-30 | 2021-06-22 | 北京市商汤科技开发有限公司 | 图像处理方法、装置、电子设备及存储介质 |
Citations (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20150072954A (ko) * | 2013-12-20 | 2015-06-30 | 배재대학교 산학협력단 | 증강현실 서비스를 제공하는 방법 및 장치 |
| CN104904195A (zh) * | 2012-09-12 | 2015-09-09 | 2Mee有限公司 | 增强现实的设备和方法 |
| CN106157255A (zh) * | 2015-04-20 | 2016-11-23 | 宋云波 | 3d画照片自动修复方法 |
| CN107231531A (zh) * | 2017-05-23 | 2017-10-03 | 青岛大学 | 一种网络虚拟现实技术与实拍结合影视制作系统 |
| CN108021896A (zh) * | 2017-12-08 | 2018-05-11 | 北京百度网讯科技有限公司 | 基于增强现实的拍摄方法、装置、设备及计算机可读介质 |
| CN108377398A (zh) * | 2018-04-23 | 2018-08-07 | 太平洋未来科技（深圳）有限公司 | 基于红外的ar成像方法、系统及电子设备 |
| CN109636922A (zh) * | 2018-08-28 | 2019-04-16 | 亮风台（上海）信息科技有限公司 | 一种用于呈现增强现实内容的方法与设备 |
| CN110166799A (zh) * | 2018-07-02 | 2019-08-23 | 腾讯科技（深圳）有限公司 | 直播互动方法、装置及存储介质 |
| CN110175595A (zh) * | 2019-05-31 | 2019-08-27 | 北京金山云网络技术有限公司 | 人体属性识别方法、识别模型训练方法及装置 |
| CN110266973A (zh) * | 2019-07-19 | 2019-09-20 | 腾讯科技（深圳）有限公司 | 视频处理方法、装置、计算机可读存储介质和计算机设备 |
| CN110276840A (zh) * | 2019-06-21 | 2019-09-24 | 腾讯科技（深圳）有限公司 | 多虚拟角色的控制方法、装置、设备及存储介质 |
| CN110619602A (zh) * | 2019-09-25 | 2019-12-27 | 北京字节跳动网络技术有限公司 | 一种图像生成方法、装置、电子设备及存储介质 |
| US20200012854A1 (en) * | 2017-09-08 | 2020-01-09 | Tencent Technology (Shenzhen) Company Ltd | Processing method for augmented reality scene, terminal device, system, and computer storage medium |
| CN110716645A (zh) * | 2019-10-15 | 2020-01-21 | 北京市商汤科技开发有限公司 | 一种增强现实数据呈现方法、装置、电子设备及存储介质 |
-
2020
- 2020-06-08 CN CN202010515019.5A patent/CN111640166B/zh active Active
Patent Citations (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104904195A (zh) * | 2012-09-12 | 2015-09-09 | 2Mee有限公司 | 增强现实的设备和方法 |
| KR20150072954A (ko) * | 2013-12-20 | 2015-06-30 | 배재대학교 산학협력단 | 증강현실 서비스를 제공하는 방법 및 장치 |
| CN106157255A (zh) * | 2015-04-20 | 2016-11-23 | 宋云波 | 3d画照片自动修复方法 |
| CN107231531A (zh) * | 2017-05-23 | 2017-10-03 | 青岛大学 | 一种网络虚拟现实技术与实拍结合影视制作系统 |
| US20200012854A1 (en) * | 2017-09-08 | 2020-01-09 | Tencent Technology (Shenzhen) Company Ltd | Processing method for augmented reality scene, terminal device, system, and computer storage medium |
| CN108021896A (zh) * | 2017-12-08 | 2018-05-11 | 北京百度网讯科技有限公司 | 基于增强现实的拍摄方法、装置、设备及计算机可读介质 |
| CN108377398A (zh) * | 2018-04-23 | 2018-08-07 | 太平洋未来科技（深圳）有限公司 | 基于红外的ar成像方法、系统及电子设备 |
| CN110166799A (zh) * | 2018-07-02 | 2019-08-23 | 腾讯科技（深圳）有限公司 | 直播互动方法、装置及存储介质 |
| CN109636922A (zh) * | 2018-08-28 | 2019-04-16 | 亮风台（上海）信息科技有限公司 | 一种用于呈现增强现实内容的方法与设备 |
| CN110175595A (zh) * | 2019-05-31 | 2019-08-27 | 北京金山云网络技术有限公司 | 人体属性识别方法、识别模型训练方法及装置 |
| CN110276840A (zh) * | 2019-06-21 | 2019-09-24 | 腾讯科技（深圳）有限公司 | 多虚拟角色的控制方法、装置、设备及存储介质 |
| CN110266973A (zh) * | 2019-07-19 | 2019-09-20 | 腾讯科技（深圳）有限公司 | 视频处理方法、装置、计算机可读存储介质和计算机设备 |
| CN110619602A (zh) * | 2019-09-25 | 2019-12-27 | 北京字节跳动网络技术有限公司 | 一种图像生成方法、装置、电子设备及存储介质 |
| CN110716645A (zh) * | 2019-10-15 | 2020-01-21 | 北京市商汤科技开发有限公司 | 一种增强现实数据呈现方法、装置、电子设备及存储介质 |
Non-Patent Citations (4)
| Title |
|---|
| STEVEN K. FEINER: "SIGCHI Lifetime Research Award Talk-Seeing Past Looking Forward", 《CHI EA \'18: EXTENDED ABSTRACTS OF THE 2018 CHI CONFERENCE ON HUMAN FACTORS IN COMPUTING SYSTEMS》, 20 April 2018 (2018-04-20) * |
| 陈超;: "前景与背景分离的图像风格迁移系统设计与实现", 信息通信, no. 04, 15 April 2019 (2019-04-15) * |
| 魏晓辉 等: "三维重建系统在医院临床科室的应用研究", 《医疗卫生装备》, no. 04, 15 April 2017 (2017-04-15) * |
| 黄菲;高飞;朱静洁;戴玲娜;俞俊;: "基于生成对抗网络的异质人脸图像合成:进展与挑战", 南京信息工程大学学报(自然科学版), no. 06, 28 November 2019 (2019-11-28) * |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112153422A (zh) * | 2020-09-25 | 2020-12-29 | 连尚(北京)网络科技有限公司 | 视频融合方法和设备 |
| CN112598803A (zh) * | 2020-12-15 | 2021-04-02 | 中国建筑西南设计研究院有限公司 | 一种景区ar合影方法 |
| CN112906467A (zh) * | 2021-01-15 | 2021-06-04 | 深圳市慧鲤科技有限公司 | 合影图像生成方法及装置、电子设备和存储介质 |
| CN112991157A (zh) * | 2021-03-30 | 2021-06-18 | 北京市商汤科技开发有限公司 | 图像处理方法、装置、电子设备及存储介质 |
| CN113012040A (zh) * | 2021-03-30 | 2021-06-22 | 北京市商汤科技开发有限公司 | 图像处理方法、装置、电子设备及存储介质 |
| CN113012039A (zh) * | 2021-03-30 | 2021-06-22 | 北京市商汤科技开发有限公司 | 图像处理方法、装置、电子设备及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111640166B (zh) | 2024-03-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111640166A (zh) | 一种ar合影方法、装置、计算机设备及存储介质 | |
| CN106161939B (zh) | 一种照片拍摄方法及终端 | |
| US11973732B2 (en) | Messaging system with avatar generation | |
| RU2672502C1 (ru) | Устройство и способ для формирования изображения роговицы | |
| CN111627086A (zh) | 一种头像的展示方法、装置、计算机设备及存储介质 | |
| CN111640165A (zh) | Ar合影图像的获取方法、装置、计算机设备及存储介质 | |
| KR102272108B1 (ko) | 영상 처리 장치 및 방법 | |
| CN111640197A (zh) | 一种增强现实ar特效控制方法、装置及设备 | |
| CN103886632A (zh) | 用户表情头像的生成方法及通信终端 | |
| CN111627117B (zh) | 画像展示特效的调整方法、装置、电子设备及存储介质 | |
| CN112839175B (zh) | 一种云手机采集图像的方法、装置、计算机设备和介质 | |
| CN111339420A (zh) | 图像处理方法、装置、电子设备及存储介质 | |
| CN111652971A (zh) | 一种显示控制方法及装置 | |
| CN111640167A (zh) | 一种ar合影方法、装置、计算机设备及存储介质 | |
| CN111640203A (zh) | 一种图像处理方法及装置 | |
| CN116438574A (zh) | 在增强现实组件中使用肖像图像 | |
| CN111625100A (zh) | 图画内容的呈现方法、装置、计算机设备及存储介质 | |
| CN117561719A (zh) | 取景器环形闪光灯 | |
| CN112639870B (zh) | 图像处理装置、图像处理方法和图像处理程序 | |
| CN111638798A (zh) | 一种ar合影方法、装置、计算机设备及存储介质 | |
| CN106791091B (zh) | 图像生成方法、装置和移动终端 | |
| CN111639613A (zh) | 一种增强现实ar特效生成方法、装置及电子设备 | |
| CN112040145A (zh) | 图像处理方法、装置及电子设备 | |
| CN107644455B (zh) | 人脸图像合成方法和装置 | |
| KR20160046399A (ko) | 텍스쳐 맵 생성 방법 및 장치와 데이터 베이스 생성 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |