CN109167723B - 图像的处理方法、装置、存储介质及电子设备 - Google Patents
图像的处理方法、装置、存储介质及电子设备 Download PDFInfo
- Publication number
- CN109167723B CN109167723B CN201810990716.9A CN201810990716A CN109167723B CN 109167723 B CN109167723 B CN 109167723B CN 201810990716 A CN201810990716 A CN 201810990716A CN 109167723 B CN109167723 B CN 109167723B
- Authority
- CN
- China
- Prior art keywords
- user
- image
- sprouting
- processing
- electronic device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 27
- 238000012545 processing Methods 0.000 claims abstract description 110
- 238000000034 method Methods 0.000 claims description 38
- 230000035784 germination Effects 0.000 claims description 34
- 230000002996 emotional effect Effects 0.000 claims description 22
- 230000008569 process Effects 0.000 claims description 21
- 241000282326 Felis catus Species 0.000 claims description 11
- 238000004590 computer program Methods 0.000 claims description 10
- 238000004458 analytical method Methods 0.000 claims description 6
- 230000008451 emotion Effects 0.000 claims description 6
- 241001465754 Metazoa Species 0.000 claims description 4
- 230000005540 biological transmission Effects 0.000 claims description 3
- 238000004891 communication Methods 0.000 abstract description 15
- 238000010586 diagram Methods 0.000 description 7
- 206010011469 Crying Diseases 0.000 description 6
- 241000282405 Pongo abelii Species 0.000 description 4
- 230000008921 facial expression Effects 0.000 description 4
- 235000012469 Cleome gynandra Nutrition 0.000 description 3
- 210000005069 ears Anatomy 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 241000282693 Cercopithecidae Species 0.000 description 2
- 241000282575 Gorilla Species 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 206010012374 Depressed mood Diseases 0.000 description 1
- 206010040007 Sense of oppression Diseases 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 230000000994 depressogenic effect Effects 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
- H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
- H04L51/10—Multimedia information
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/04—Context-preserving transformations, e.g. by using an importance map
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请公开了一种图像的处理方法、装置、存储介质及电子设备。该图像的处理方法可以应用于第一电子设备,包括:获取第一用户的图像;获取第二用户的生物特征信息;若根据该生物特征信息判断出该第二用户处于预设状态,则对该第一用户的图像进行萌化处理;将经过萌化处理的图像传输至第二电子设备,以显示给该第二用户观看。本实施例可以提高用于用户间沟通的图像的呈现方式的多样性。
Description
技术领域
本申请属于终端技术领域,尤其涉及一种图像的处理方法、装置、存储介质及电子设备。
背景技术
随着通信技术的不断发展,用户之间可以通过诸如照片、视频等包含图像的信息进行沟通。这些方式使得用户之间的沟通变得更具趣味性,拉近了用户之间距离,提高了用户体验。然而,相关技术中,用于用户之间进行沟通的图像的呈现方式的多样性较差。
发明内容
本申请实施例提供一种图像的处理方法、装置、存储介质及电子设备,可以提高用于用户间沟通的图像的呈现方式的多样性。
本申请实施例提供一种图像的处理方法,应用于第一电子设备,包括:
获取第一用户的图像;
获取第二用户的生物特征信息;
若根据所述生物特征信息判断出所述第二用户处于预设状态,则对所述第一用户的图像进行萌化处理;
将经过萌化处理的图像传输至第二电子设备,以显示给所述第二用户观看。
本申请实施例提供一种图像的处理装置,应用于第一电子设备,包括:
第一获取模块,用于获取第一用户的图像;
第二获取模块,用于获取第二用户的生物特征信息;
处理模块,用于若根据所述生物特征信息判断出所述第二用户处于预设状态,则对所述第一用户的图像进行萌化处理;
传输模块,用于将经过萌化处理的图像传输至第二电子设备,以显示给所述第二用户观看。
本申请实施例提供一种存储介质,其上存储有计算机程序,当所述计算机程序在计算机上执行时,使得所述计算机执行本申请实施例提供的图像的处理方法中的步骤。
本申请实施例还提供一种电子设备,包括存储器,处理器,所述处理器通过调用所述存储器中存储的计算机程序,用于执行本申请实施例提供的图像的处理方法中的步骤。
本实施例中,第一电子设备可以在根据第二用户的生物特征信息判断出第二用户处于预设状态时,对用于与第二用户进行沟通的第一用户的图像进行萌化处理,并将萌化处理后的第一用户的图像发送至第二电子设备,以通过第二电子设备显示给第二用户观看。由于本实施例可以根据第二用户的状态来对第一用户的图像进行萌化处理,并使用萌化处理后的图像与第二用户沟通,因此相比于使用未经任何处理的第一用户的图像与第二用户进行沟通,本实施例可以提高用于用户间沟通的图像的呈现方式的多样性。
附图说明
下面结合附图,通过对本发明的具体实施方式详细描述,将使本发明的技术方案及其有益效果显而易见。
图1是本申请实施例提供的图像的处理方法的流程示意图。
图2是本申请实施例提供的图像的处理方法的另一流程示意图。
图3至图5是本申请实施例提供的图像的处理方法的场景示意图。
图6是本申请实施例提供的图像的处理装置的结构示意图。
图7是本申请实施例提供的第一电子设备的结构示意图。
图8是本申请实施例提供的第一电子设备的另一结构示意图。
具体实施方式
请参照图示,其中相同的组件符号代表相同的组件,本发明的原理是以实施在一适当的运算环境中来举例说明。以下的说明是基于所例示的本发明具体实施例,其不应被视为限制本发明未在此详述的其它具体实施例。
可以理解的是,本申请实施例的执行主体可以是诸如智能手机或平板电脑等的电子设备。
请参阅图1,图1是本申请实施例提供的图像的处理方法的流程示意图。该图像的处理方法可以应用于第一电子设备。该图像的处理方法的流程可以包括:
在101中,获取第一用户的图像。
随着通信技术的不断发展,用户之间可以通过诸如照片、视频等包含图像的信息进行沟通。这些方式使得用户之间的沟通变得更具趣味性,拉近了用户之间距离,提高了用户体验。然而,相关技术中,用于用户之间进行沟通的图像的呈现方式的多样性较差。
在本申请实施例的101中,第一电子设备可以先获取第一用户的图像。在一种实施方式中,第一用户的图像可以是照片或者视频等,本实施例对此不做限定。
在102中,获取第二用户的生物特征信息。
比如,第一电子设备可以获取第二用户的生物特征信息。在一种实施方式中,可以先由第二电子设备获取第二用户的生物特征信息,然后第二电子设备再将第二用户的生物特征信息传输给第一电子设备。
在获取到第二用户的生物特征信息后,第一电子设备可以根据该生物特征信息判断第二用户是否处于预设状态。
若判断出第二用户不处于预设状态,那么第一电子设备可以执行其它操作。
若判断出第二用户处于预设状态,那么可以进入103。
在103中,若根据生物特征信息判断出第二用户处于预设状态,则对第一用户的图像进行萌化处理。
比如,第一电子设备在获取到第二用户的生物特征信息后,据此判断出第二用户处于预设状态,那么第一电子设备可以对第一用户的图像进行萌化处理。
需要说明的是,对图像进行萌化处理是指将图像与特定的事物相结合,而使图像变得萌起来。例如,图像为一张人脸照片,那么对图像进行萌化处理可以是将人脸与手绘的猫耳朵、猫须等结合,从而使手绘的猫耳朵出现在人脸的头顶部位,手绘的猫须则出现在人脸的脸颊部位。人脸与手绘的猫耳朵和猫须结合后会使人脸变得更加可爱,整张照片也就变得更加的萌。又如,图像为一张人脸照片,那么对该人脸照片进行萌化处理可以是对人脸的眼部、耳部、鼻子或嘴部等部位进行放大,从而使整张照片的风格变得嘻哈等。当然,在其他实施方式中,对图像进行萌化处理也可以是对图像进行动漫化处理,从而使图像具有一种动漫风格等。可以理解的是,本实施例中对萌化处理的举例不构成对本实施例的限定,在其他实施方式中,还可以将图像与其他特定的事物结合起来,从而使图像变得更具喜感,这些处理方式都属于对图像进行萌化处理。
在104中,将经过萌化处理的图像传输至第二电子设备,以显示给第二用户观看。
比如,在对第一用户的图像进行萌化处理后,第一电子设备可以将经过萌化处理的第一用户的图像传输至第二电子设备,以通过第二电子设备显示给第二用户观看。
可以理解的是,本实施例中,第一电子设备可以在根据第二用户的生物特征信息判断出第二用户处于预设状态时,对用于与第二用户进行沟通的第一用户的图像进行萌化处理,并将萌化处理后的第一用户的图像发送至第二电子设备,以通过第二电子设备显示给第二用户观看。由于本实施例可以根据第二用户的状态来对第一用户的图像进行萌化处理,并使用萌化处理后的图像与第二用户沟通,因此相比于使用未经任何处理的第一用户的图像与第二用户进行沟通,本实施例可以提高用于用户间沟通的图像的呈现方式的多样性。
请参阅图2,图2为本申请实施例提供的图像的处理方法的另一流程示意图,流程可以包括:
在201中,第一电子设备获取第一用户的图像。
比如,第一电子设备可以先获取第一用户的图像,该图像可以是第一用户的照片或者视频等。
在202中,第一电子设备获取第二用户的声音信息,其中该声音信息至少包括声音的响度、音调、频率。
比如,本实施例中可以先由第二电子设备获取第二用户的声音信息,之后再由第二电子设备将第二用户的声音信息传输给第一电子设备,从而使第一电子设备获取到第二用户的声音信息。其中,第二用户的声音信息至少可以包括第二用户的声音的响度、音调和频率等声音属性。
在获取到第二用户的声音信息后,第一电子设备可以根据该声音信息,判断该第二用户是否处于预设的情绪状态。例如,预设的情绪状态可以是诸如哭闹、生气等情绪状态。
需要说明的是,由于用户在不同的情绪状态下,用户的声音信息会有所不同。比如,用户在开心时的声音的响度、音调和频率等属性参数与用户在生气或哭闹时的声音的响度、音调和频率等属性参数存在明显不同。因此,电子设备可以通过用户的声音属性来判断用户所处的情绪状态。
在一种实施方式中,电子设备可以预先获取用户在生气、哭闹等情绪状态时大量的声音信息样本。然后,电子设备可以通过人工智能领域的机器学习算法(如卷积神经网络等)对这些声音信息进行自学习,从而得到用户处于预设的生气、哭闹等情绪状态时的声音特征模型。那么,在第一电子设备获取到第二用户的声音信息后,第一电子设备可以将该第二用户的声音信息作为输入,输入到通过机器学习算法得到的声音特征模型,从而得到输出结果。该输出结果可以指示第二用户是否处于预设的生气、哭闹等情绪状态。
如果判断出第二用户不处于预设的情绪状态,那么第一电子设备可以执行其它操作。
如果判断出第二用户处于预设的情绪状态,那么可以进入203中。
在203中,若根据声音信息判断出第二用户处于预设的情绪状态,则第一电子设备获取第二用户的语音信息。
在204中,第一电子设备对语音信息进行语义分析,得到与该语音信息对应的图像处理指令。
比如,203和204可以包括:
第一电子设备根据第二用户的声音信息判断出第二用户处于预设的生气、哭闹等情绪状态,那么第一电子设备可以获取该第二用户的语音信息。例如,本实施例中可以先由第二电子设备获取该第二用户的语音信息,之后第二电子设备将获取到的第二用户的语音信息发送至第一电子设备。
在获取到第二用户的语音信息后,第一电子设备可以对该语音信息进行语义分析,从而得到与第二用户的语音信息对应的图像处理指令。例如,第二用户的语音信息为“眼睛和嘴巴变大”,那么第一电子设备在对该语音进行语义分析后,可以得到需要将第一用户的图像中的眼睛和嘴巴变大的图像处理指令。
在205中,根据图像处理指令,第一电子设备获取对应的第一萌化参数,并根据该第一萌化参数对第一用户的图像进行萌化处理。
比如,在得到与第二用户的语音信息对应的图像处理指令后,第一电子设备可以根据该图像处理指令,获取对应的第一萌化参数,并根据该第一萌化参数对第一用户的图像进行萌化处理,从而得到经过萌化处理的第一用户的图像。
例如,在得到需要将第一用户的图像中的眼睛和嘴巴变大的图像处理指令,第一电子设备可以获取对应的将人物的眼睛和嘴巴变大的第一萌化参数,然后根据该第一萌化参数对第一用户的图像中的眼睛和嘴巴进行处理,从而使眼睛和嘴巴变大,以使得图像中的第一用户变得更萌。
在206中,第一电子设备将经过萌化处理的图像传输至第二电子设备,以显示给第二用户观看。
比如,在得到经过萌化处理的第一用户的图像后,第一电子设备可以将该经过萌化处理的第一用户的图像传输至第二电子设备,并通过第二电子设备显示给第二用户观看。
在另一种实施方式中,在第一电子设备获取到第一用户的图像后,第一电子设备可以获取第二用户的人脸图像。例如,本实施例中可以先由第二电子设备获取第二用户的人脸图像,再发送至第一电子设备。之后,第一电子设备可以根据第二用户的人脸图像,判断第二用户是否处于预设的表情状态。若判断出第二用户不处于预设的表情状态,那么第一电子设备可以执行其它操作。若判断出第二用户处于预设的表情状态,那么第一电子设备可以对第一用户的图像进行萌化处理。例如,第一电子设备根据第二用户的人脸图像,判断出第二用户处于预设的生气、郁闷的表情状态,那么第一电子设备可以对第一用户的图像进行萌化处理。之后,第一电子设备再将经过萌化处理的图像传输至第二电子设备,并通过第二电子设备显示给第二用户观看。
例如,第一电子设备根据第二用户的人脸图像判断出第二用户处于预设的郁闷的表情状态。那么,第一电子设备可以对第一用户的图像进行萌化处理,从而使第一用户的图像变得更具喜感。那么,经过萌化处理后的第一用户的图像在传输给第二电子设备显示给第二用户观看时,第二用户在看到萌化的、更具喜感的图像后,可以化解或缓解第二用户的郁闷情绪。
在一种实施方式中,第一电子设备在执行获取第一用户的图像时,可以执行:获取第一用户的三维图像;
那么,第一电子设备执行若根据第二用户的人脸图像判断出第二用户处于预设的表情状态,则对第一用户的图像进行萌化处理的流程时,可以执行:
若根据人脸图像判断出第二用户处于预设的表情状态,则第一电子设备根据第一用户的三维图像,获取该第一用户的表情特征;
在预设图像库中,第一电子设备查找与第一用户的表情特征匹配的目标萌化图像,其中预设图像库中存储有多个萌化图像;
第一电子设备获取目标萌化图像的第二萌化参数,并根据该第二萌化参数对三维图像进行萌化处理。
比如,第一电子设备根据第二用户的人脸图像判断出第二用户处于预设的郁闷、生气等表情状态时,第一电子设备可以获取第一用户的三维图像。然后,第一电子设备可以从第一用户的三维图像中获取第一用户的表情特征。之后,第一电子设备可以在预设图像库中查找与第一用户的表情特征匹配的目标萌化图像。其中,预设图像库中预先存储有众多萌化图像。
在查找到目标萌化图像后,第一电子设备可以获取该目标萌化图像的萌化参数(即第二萌化参数),并根据该第二萌化参数对第一用户的三维图像进行萌化处理。
例如,第一电子设备获取到的第一用户的图像中,第一用户的表情为睁大眼睛且张大嘴巴。那么,第一电子设备可以在预设图像库中查找与睁大眼睛且张大嘴巴的表情相匹配的目标萌化图像。例如,预设图像库中存储有各种动物的萌化表情图像,比如有猴子、猩猩等的萌化表情图像。比如,第一电子设备在预设图像库中查找到猩猩的某一张图像A中的萌化表情与第一用户睁大眼睛且张大嘴巴的表情相匹配,那么第一电子设备可以获取该图像A的萌化参数(即第二萌化参数),并根据该图像A的萌化参数对第一用户的图像进行萌化处理。例如,图像A中猩猩的表情除了睁大眼睛和张大嘴巴外,猩猩的鼻子也是大大的,即图像A的萌化参数包含有对眼睛、嘴巴、鼻子的萌化处理参数,那么第一电子设备在对第一用户的三维图像进行萌化处理时会对第一用户的眼睛、嘴巴、鼻子均进行萌化处理,使第一用户的眼睛、嘴巴、鼻子变大,从而具有夸张的效果。
在一种实施方式中,第一电子设备在执行获取第一用户的三维图像的流程时,可以执行:
第一电子设备获取第一用户的二维图像,以及第一用户相对该第一电子设备的深度信息;
根据该二维图像以及深度信息,第一电子设备获取第一用户的三维图像。
比如,第一电子设备在获取第一用户的三维图像时,可以先获取第一用户的二维图像,以及第一用户相对于第一电子设备的深度信息,然后再根据该二维图像和深度信息获取第一用户的三维图像。
在一种实施方式中,在第一电子设备上安装有TOF(Time of Flight,飞行时间)摄像头的情况下,第一电子设备可以通过TOF摄像头探测第一用户的图像的深度信息。通过结合二维图像和图像的深度信息,TOF摄像头即可以获取第一用户(拍摄对象)的整个立体信息,从而呈现一个立体图像即三维图像。
请参阅图3至图5,图3至图5为本申请实施例提供的图像的处理方法的场景示意图。
如图3所示,本实施例提供一种图像的处理系统,该系统可以包括第一电子设备100和第二电子设备200。其中,第一电子设备100可以安装在汽车中控台附件,用于采集第一用户(如汽车驾驶员)的图像。第二电子设备200可以安装在第一用户的座位背面,用于采集第二用户(如第一用户的孩子)的生物特征信息。第一电子设备100可以将采集到的第一用户的图像传输给第二电子设备200,并通过第二电子设备200显示给第二用户观看。第二电子设备200可以将采集到的第二用户的生物特征信息传输给第一电子设备。在一种实施方式中,第一电子设备100和第二电子设备200均可以自动调焦以采集相应用户的清晰图像。
比如,汽车在驾驶途中,第二电子设备200可以获取第二用户的生物特征信息。例如第二电子设备200可以获取第二用户的人脸图像。之后,第二电子设备200可以将获取到的第二用户的人脸图像传输给第一电子设备100。第一电子设备在获取到第二用户的人脸图像后,可以根据该人脸图像判断第二用户是否处于预设的表情状态。例如,第一电子设备可以根据第二用户的人脸图像判断第二用户是否处于预设的郁闷、生气、哭泣等消极情绪状态。
例如,本实施例中,第一电子设备根据第二用户的人脸图像判断出第二用户处于生气的情绪状态。在这种情况下,第一电子设备可以获取第一用户的三维图像。之后,第一电子设备可以从第一用户的三维图像中,获取第一用户的表情特征。例如,第一用户的表情特征为睁大眼睛且张大嘴巴,如图4所示。之后,第一电子设备可以在预设图像库中查找与睁大眼睛且张大嘴巴的表情相匹配的目标萌化图像。例如,预设图像库中预先存储有各种动物的萌化表情图像,比如有猴子、猩猩等的萌化表情图像。
比如,第一电子设备在预设图像库中查找到猩猩的某一张图像A中的萌化表情与第一用户睁大眼睛且张大嘴巴的表情相匹配,那么第一电子设备可以获取该图像A的萌化处理参数,并根据该图像A的萌化处理参数对第一用户的图像进行萌化处理。例如,图像A中猩猩的表情除了睁大眼睛和张大嘴巴外,猩猩的鼻子也是大大的,即图像A的萌化处理参数包含有对眼睛、嘴巴、鼻子的萌化处理参数,那么第一电子设备在对第一用户的三维图像进行萌化处理时会对第一用户的眼睛、嘴巴、鼻子均进行萌化处理,使第一用户的眼睛、嘴巴、鼻子变大,从而具有夸张的喜感效果。例如,如图5所示为经过萌化处理后的第一用户的图像。
在对第一用户的三维图像进行萌化处理后,第一电子设备可以将萌化处理后的第一用户的图像传输给第二电子设备,并通过第二电子设备显示给第二用户观看,从而通过萌化的图像逗乐第二用户,以此缓解或化解第二用户的生气情绪。
可以理解的是,本实施例提供了一种汽车内的图像沟通方式。通过固定在汽车中控台附件的第一电子设备获取第一用户的图像,在对第一用户的图像进行萌化处理后,将其传送到第二电子设备以显示给处于郁闷或生气等情绪状态中的第二用户,以逗乐第二用户。当第一用户(驾驶员)为父母,第二用户为儿童时,本实施例可以增加驾驶途中的亲子互动,吸引儿童注意力,增加儿童在乘车过程中的趣味性和安全感,减少疲劳和负面情绪。
请参阅图6,图6为本申请实施例提供的图像的处理装置的结构示意图。图像的处理装置300可以包括:第一获取模块301,第二获取模块302,处理模块303,以及传输模块304。
第一获取模块301,用于获取第一用户的图像。
第二获取模块302,用于获取第二用户的生物特征信息。
处理模块303,用于若根据所述生物特征信息判断出所述第二用户处于预设状态,则对所述第一用户的图像进行萌化处理。
传输模块304,用于将经过萌化处理的图像传输至第二电子设备,以显示给所述第二用户观看。
在一种实施方式中,所述第二获取模块302可以用于:获取第二用户的人脸图像。
那么,所述处理模块303可以用于:若根据所述人脸图像判断出所述第二用户处于预设的表情状态,则对所述第一用户的图像进行萌化处理。
在一种实施方式中,所述第二获取模块302可以用于:获取第二用户的声音信息,其中所述声音信息至少包括声音的响度、音调、频率;
那么,所述处理模块303可以用于:若根据所述声音信息判断出所述第二用户处于预设的情绪状态,则对所述第一用户的图像进行萌化处理。
在一种实施方式中,所述处理模块303可以用于:若根据所述声音信息判断出所述第二用户处于预设的情绪状态,则获取所述第二用户的语音信息;对所述语音信息进行语义分析,得到与所述语音信息对应的图像处理指令;根据所述图像处理指令,获取对应的第一萌化参数,并根据所述第一萌化参数对所述第一用户的图像进行萌化处理。
在一种实施方式中,所述第一获取模块301可以用于:获取第一用户的三维图像。
那么,所述处理模块303可以用于:若根据所述人脸图像判断出所述第二用户处于预设的表情状态,则根据所述第一用户的三维图像,获取所述第一用户的表情特征;在预设图像库中,查找与所述第一用户的表情特征匹配的目标萌化图像,其中所述预设图像库中存储有多个萌化图像;获取所述目标萌化图像的第二萌化参数,并根据所述第二萌化参数对所述三维图像进行萌化处理。
在一种实施方式中,所述第一获取模块301可以用于:获取所述第一用户的二维图像,以及所述第一用户相对所述第一电子设备的深度信息;根据所述二维图像以及所述深度信息,获取所述第一用户的三维图像。
本申请实施例提供一种计算机可读的存储介质,其上存储有计算机程序,当所述计算机程序在计算机上执行时,使得所述计算机执行如本实施例提供的图像的处理方法中的步骤。
本申请实施例还提供一种电子设备,包括存储器,处理器,所述处理器通过调用所述存储器中存储的计算机程序,用于执行本实施例提供的图像的处理方法中的步骤。
例如,上述电子设备可以是诸如平板电脑或者智能手机等移动终端。请参阅图7,图7为本申请实施例提供的第一电子设备的结构示意图。
该第一电子设备400可以包括显示屏401、存储器402、处理器403、摄像模组404等部件。本领域技术人员可以理解,图7中示出的电子设备结构并不构成对电子设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
显示屏401可以用于显示诸如图像、文字等信息。
存储器402可用于存储应用程序和数据。存储器402存储的应用程序中包含有可执行代码。应用程序可以组成各种功能模块。处理器403通过运行存储在存储器402的应用程序,从而执行各种功能应用以及数据处理。
处理器403是电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器402内的应用程序,以及调用存储在存储器402内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。
摄像模组404可以用于采集用户的图像等。
在本实施例中,电子设备中的处理器403会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行代码加载到存储器402中,并由处理器403来运行存储在存储器402中的应用程序,从而执行:
获取第一用户的图像;
获取第二用户的生物特征信息;
若根据所述生物特征信息判断出所述第二用户处于预设状态,则对所述第一用户的图像进行萌化处理;
将经过萌化处理的图像传输至第二电子设备,以显示给所述第二用户观看。
请参阅图8,第一电子设备500可以包括显示屏501、存储器502、处理器503、输入单元504、输出单元505、摄像模组506等部件。
显示屏501可以用于显示诸如图像、文字等信息。
存储器502可用于存储应用程序和数据。存储器502存储的应用程序中包含有可执行代码。应用程序可以组成各种功能模块。处理器503通过运行存储在存储器502的应用程序,从而执行各种功能应用以及数据处理。
处理器503是电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器502内的应用程序,以及调用存储在存储器502内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。
输入单元504可用于接收输入的数字、字符信息或用户特征信息(比如指纹),以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。
输出单元505可用于显示由用户输入的信息或提供给用户的信息以及电子设备的各种图形用户接口,这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。输出单元可包括显示面板。
摄像模组506可以用于采集用户的图像等。
在本实施例中,电子设备中的处理器503会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行代码加载到存储器502中,并由处理器503来运行存储在存储器502中的应用程序,从而执行:
获取第一用户的图像;获取第二用户的生物特征信息;若根据所述生物特征信息判断出所述第二用户处于预设状态,则对所述第一用户的图像进行萌化处理;将经过萌化处理的图像传输至第二电子设备,以显示给所述第二用户观看。
在一种实施方式中,处理器503执行所述获取第二用户的生物特征信息时,可以执行:获取第二用户的人脸图像。
那么,处理器503执行所述若根据所述生物特征信息判断出所述第二用户处于预设状态,则对所述第一用户的图像进行萌化处理时,可以执行:若根据所述人脸图像判断出所述第二用户处于预设的表情状态,则对所述第一用户的图像进行萌化处理。
在一种实施方式中,处理器503执行所述获取第二用户的生物特征信息时,可以执行:获取第二用户的声音信息,其中所述声音信息至少包括声音的响度、音调、频率。
那么,处理器503执行所述若根据所述生物特征信息判断出所述第二用户处于预设状态,则对所述第一用户的图像进行萌化处理时,可以执行:若根据所述声音信息判断出所述第二用户处于预设的情绪状态,则对所述第一用户的图像进行萌化处理。
在一种实施方式中,处理器503执行所述若根据所述声音信息判断出所述第二用户处于预设的情绪状态,则对所述第一用户的图像进行萌化处理时,可以执行:若根据所述声音信息判断出所述第二用户处于预设的情绪状态,则获取所述第二用户的语音信息;对所述语音信息进行语义分析,得到与所述语音信息对应的图像处理指令;根据所述图像处理指令,获取对应的第一萌化参数,并根据所述第一萌化参数对所述第一用户的图像进行萌化处理。
在一种实施方式中,处理器503执行所述获取第一用户的图像时,可以执行:获取第一用户的三维图像。
那么,处理器503执行所述若根据所述人脸图像判断出所述第二用户处于预设的表情状态,则对所述第一用户的图像进行萌化处理时,可以执行:若根据所述人脸图像判断出所述第二用户处于预设的表情状态,则根据所述第一用户的三维图像,获取所述第一用户的表情特征;在预设图像库中,查找与所述第一用户的表情特征匹配的目标萌化图像,其中所述预设图像库中存储有多个萌化图像;获取所述目标萌化图像的第二萌化参数,并根据所述第二萌化参数对所述三维图像进行萌化处理。
在一种实施方式中,处理器503执行获取所述第一用户的三维图像时,可以执行:获取所述第一用户的二维图像,以及所述第一用户相对所述第一电子设备的深度信息;根据所述二维图像以及所述深度信息,获取所述第一用户的三维图像。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见上文针对图像的处理方法的详细描述,此处不再赘述。
本申请实施例提供的所述图像的处理装置与上文实施例中的图像的处理方法属于同一构思,在所述图像的处理装置上可以运行所述图像的处理方法实施例中提供的任一方法,其具体实现过程详见所述图像的处理方法实施例,此处不再赘述。
需要说明的是,对本申请实施例所述图像的处理方法而言,本领域普通技术人员可以理解实现本申请实施例所述图像的处理方法的全部或部分流程,是可以通过计算机程序来控制相关的硬件来完成,所述计算机程序可存储于一计算机可读取存储介质中,如存储在存储器中,并被至少一个处理器执行,在执行过程中可包括如所述图像的处理方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储器(ROM,Read OnlyMemory)、随机存取记忆体(RAM,Random Access Memory)等。
对本申请实施例的所述图像的处理装置而言,其各功能模块可以集成在一个处理芯片中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中,所述存储介质譬如为只读存储器,磁盘或光盘等。
以上对本申请实施例所提供的一种图像的处理方法、装置、存储介质以及电子设备进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (9)
1.一种图像的处理方法,应用于第一电子设备,其特征在于,包括:
所述第一电子设备获取第一用户的三维图像;
所述第一电子设备获取在驾驶途中第二用户的生物特征信息;
若根据所述生物特征信息判断出所述第二用户处于预设的消极情绪状态,则根据所述第一用户的三维图像,获取所述第一用户的表情特征,在预设图像库中,查找与所述第一用户的表情特征匹配的目标萌化图像,其中所述预设图像库中存储有各种动物的萌化表情图像,所述第一电子设备获取所述目标萌化图像的萌化参数,根据所述萌化参数对所述第一用户的图像进行萌化处理,其中所述萌化处理包括:将第一用户人脸与手绘的猫耳朵、猫须结合,以使手绘的猫耳朵出现在人脸的头顶部位,手绘的猫须出现在人脸的脸颊部位,或者,对第一用户的眼睛、嘴巴、鼻子均进行萌化处理,以使第一用户的眼睛、嘴巴、鼻子变大,或者对第一用户图像进行动漫化处理,以使第一用户图像满足预设动漫风格;
所述第一电子设备将经过萌化处理的图像传输至第二电子设备,以显示给所述第二用户观看。
2.根据权利要求1所述的图像的处理方法,其特征在于,获取第二用户的生物特征信息,包括:获取第二用户的人脸图像;
所述根据所述生物特征信息判断出所述第二用户处于预设的消极情绪状态,包括:根据所述人脸图像判断出所述第二用户处于预设的表情状态。
3.根据权利要求1所述的图像的处理方法,其特征在于,获取第二用户的生物特征信息,包括:获取第二用户的声音信息,其中所述声音信息至少包括声音的响度、音调、频率;
所述根据所述生物特征信息判断出所述第二用户处于预设的消极情绪状态,包括:根据所述声音信息判断出所述第二用户处于预设的情绪状态。
4.根据权利要求3所述的图像的处理方法,其特征在于,若根据所述声音信息判断出所述第二用户处于预设的消极情绪状态,还包括:
获取所述第二用户的语音信息;
对所述语音信息进行语义分析,得到与所述语音信息对应的图像处理指令;
所述第一电子设备根据所述图像处理指令,获取对应的第一萌化参数,并根据所述第一萌化参数为第一用户的图像中的人脸部位叠加萌化图像,或者所述第一萌化参数对所述第一用户的图像中的人脸部位进行放大处理。
5.根据权利要求1所述的图像的处理方法,其特征在于,获取所述第一用户的三维图像,包括:
获取所述第一用户的二维图像,以及所述第一用户相对所述第一电子设备的深度信息;
根据所述二维图像以及所述深度信息,获取所述第一用户的三维图像。
6.一种图像的处理装置,应用于第一电子设备,其特征在于,包括:
第一获取模块,用于所述第一电子设备获取第一用户的三维图像;
第二获取模块,用于所述第一电子设备获取在驾驶途中第二用户的生物特征信息;
处理模块,用于若根据所述生物特征信息判断出所述第二用户处于预设的消极情绪状态,则根据所述第一用户的三维图像,获取所述第一用户的表情特征;在预设图像库中,查找与所述第一用户的表情特征匹配的目标萌化图像,其中所述预设图像库中存储有各种动物的萌化表情图像;所述第一电子设备获取所述目标萌化图像的萌化参数,根据所述萌化参数对所述第一用户的图像进行萌化处理,其中所述萌化处理包括:将第一用户人脸与手绘的猫耳朵、猫须结合,以使手绘的猫耳朵出现在人脸的头顶部位,手绘的猫须出现在人脸的脸颊部位,或者,对第一用户的眼睛、嘴巴、鼻子均进行萌化处理,以使第一用户的眼睛、嘴巴、鼻子变大,或者对第一用户图像进行动漫化处理,以使第一用户图像满足预设动漫风格;
传输模块,用于所述第一电子设备将经过萌化处理的图像传输至第二电子设备,以显示给所述第二用户观看。
7.根据权利要求6所述的图像的处理装置,其特征在于,所述第二获取模块用于:获取第二用户的人脸图像或声音信息,其中所述声音信息至少包括声音的响度、音调、频率;
所述处理模块还用于:若根据所述人脸图像或声音信息判断出所述第二用户处于预设的表情状态,则触发所述第一电子设备对第一用户的图像进行萌化处理。
8.一种存储介质,其上存储有计算机程序,其特征在于,当所述计算机程序在计算机上执行时,使得所述计算机执行如权利要求1至5中任一项所述的方法。
9.一种电子设备,包括存储器,处理器,其特征在于,所述处理器通过调用所述存储器中存储的计算机程序,用于执行如权利要求1至5中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810990716.9A CN109167723B (zh) | 2018-08-28 | 2018-08-28 | 图像的处理方法、装置、存储介质及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810990716.9A CN109167723B (zh) | 2018-08-28 | 2018-08-28 | 图像的处理方法、装置、存储介质及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109167723A CN109167723A (zh) | 2019-01-08 |
CN109167723B true CN109167723B (zh) | 2021-11-23 |
Family
ID=64893191
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810990716.9A Active CN109167723B (zh) | 2018-08-28 | 2018-08-28 | 图像的处理方法、装置、存储介质及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109167723B (zh) |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105190699B (zh) * | 2013-06-05 | 2019-09-03 | 英特尔公司 | 基于面部运动数据的卡拉ok化身动画 |
US9576175B2 (en) * | 2014-05-16 | 2017-02-21 | Verizon Patent And Licensing Inc. | Generating emoticons based on an image of a face |
CN105809660B (zh) * | 2014-12-29 | 2019-06-25 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
CN107483441A (zh) * | 2017-08-16 | 2017-12-15 | 维沃移动通信有限公司 | 一种通信方法及移动终端 |
CN107678626A (zh) * | 2017-10-11 | 2018-02-09 | 广东小天才科技有限公司 | 一种互动交流方法、系统及终端设备 |
CN108022206A (zh) * | 2017-11-30 | 2018-05-11 | 广东欧珀移动通信有限公司 | 图像处理方法、装置、电子设备及计算机可读存储介质 |
CN107911643B (zh) * | 2017-11-30 | 2020-10-27 | 维沃移动通信有限公司 | 一种视频通信中展现场景特效的方法和装置 |
-
2018
- 2018-08-28 CN CN201810990716.9A patent/CN109167723B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN109167723A (zh) | 2019-01-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2024028390A (ja) | 顔に対応する3次元アバターを用いて顔の動きが反映された3dアバターを含むイメージを生成する電子装置 | |
US11711414B2 (en) | Triggering changes to real-time special effects included in a live streaming video | |
US12067804B2 (en) | True size eyewear experience in real time | |
KR20240137630A (ko) | 객체 대체 시스템 | |
US11531400B2 (en) | Electronic communication interface with haptic feedback response | |
US11989348B2 (en) | Media content items with haptic feedback augmentations | |
US20240184372A1 (en) | Virtual reality communication interface with haptic feedback response | |
US20220206584A1 (en) | Communication interface with haptic feedback response | |
US20220317775A1 (en) | Virtual reality communication interface with haptic feedback response | |
US20220210370A1 (en) | Real-time video communication interface with haptic feedback response | |
EP4272056A1 (en) | Communication interface with haptic feedback response | |
US12050729B2 (en) | Real-time communication interface with haptic and audio feedback response | |
US20230120037A1 (en) | True size eyewear in real time | |
EP4396669A1 (en) | Conversation guided augmented reality experience | |
WO2022212174A1 (en) | Interface with haptic and audio feedback response | |
WO2022212175A1 (en) | Interface with haptic and audio feedback response | |
US20240248546A1 (en) | Controlling augmented reality effects through multi-modal human interaction | |
CN117789306A (zh) | 图像处理方法、装置及存储介质 | |
CN109167723B (zh) | 图像的处理方法、装置、存储介质及电子设备 | |
US12147601B1 (en) | Removing eye blinks from EMG speech signals | |
US11922587B2 (en) | Dynamic augmented reality experience | |
EP4341784A1 (en) | Automatic media capture using biometric sensor data | |
WO2022245831A1 (en) | Automatic media capture using biometric sensor data |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |