CN106127828A - 一种增强现实的处理方法、装置及移动终端 - Google Patents

一种增强现实的处理方法、装置及移动终端 Download PDF

Info

Publication number
CN106127828A
CN106127828A CN201610507156.8A CN201610507156A CN106127828A CN 106127828 A CN106127828 A CN 106127828A CN 201610507156 A CN201610507156 A CN 201610507156A CN 106127828 A CN106127828 A CN 106127828A
Authority
CN
China
Prior art keywords
user
mood
augmented reality
classification
destination object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610507156.8A
Other languages
English (en)
Inventor
曾元清
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201610507156.8A priority Critical patent/CN106127828A/zh
Publication of CN106127828A publication Critical patent/CN106127828A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/005—General purpose rendering architectures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174—Facial expression recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychiatry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • Computer Graphics (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明实施例公开了一种增强现实的处理方法、装置及移动终端，其中，该方法包括：获取现实图像中的目标对象，确定用户的心情的类别，根据所述用户的心情的类别，对所述目标对象进行增强现实处理。本发明实施例公开的增强现实的处理方法、装置及移动终端，可以实现根据用户心情提供相应的增强现实内容，提高增强现实内容与用户需求的匹配度，满足用户需求。

Description

一种增强现实的处理方法、装置及移动终端
技术领域
本发明实施例涉及增强现实技术领域，尤其涉及一种增强现实的处理方法、装置及移动终端。
背景技术
增强现实技术(Augmented Reality，AR)是将现实世界中的一定时间空间范围内很难体验到的信息(如视觉信息、声音、味道、触觉等)叠加融合到真实的环境中被人类感官所感知，从而增强使用者在真实环境中的感知能力，加深沉浸感的体验。
随着手机等智能终端上的拍照功能越来越成熟，用户使用手机拍照的频率越来越高，增强现实功能也开始慢慢集成到手机等智能终端上。
在现有拍照过程中，现有增强现实技术只是简单地将特定的增强现实内容叠加到现实图像中，提供的增强现实内容与用户的需求匹配度较低，无法满足用户的需求。
发明内容
本发明实施例提出一种增强现实的处理方法、装置及移动终端，以实现根据用户心情提供相应的增强现实内容，提高增强现实内容与用户需求的匹配度，满足用户需求。
第一方面，本发明实施例提供了一种增强现实的处理方法，包括：
获取现实图像中的目标对象；
确定用户的心情的类别；
根据所述用户的心情的类别，对所述目标对象进行增强现实处理。
第二方面，本发明实施例还提供了一种增强现实的处理装置，包括：
目标对象获取单元，用于获取现实图像中的目标对象；
用户心情确定单元，用于确定用户的心情的类别；
增强现实处理单元，用于根据所述用户的心情的类别，对所述目标对象进行增强现实处理。
第三方面，本发明实施例还提供了一种移动终端，包括第二方面提供的增强现实的处理装置。
本发明实施例提供的增强现实的处理方法、装置及移动终端，获取现实图像中的目标对象，确定用户的心情的类别，根据所述用户的心情类别，对所述目标对象进行增强现实处理。增强现实处理的过程与用户的心情关联，根据用户心情提供相应的增强现实处理，提高增强现实处理与用户需求的匹配度，满足用户需求。
附图说明
图1是本发明实施例一提供的一种增强现实的处理方法的流程示意图；
图2是本发明实施例二提供的一种增强现实的处理方法的流程示意图；
图3是本发明实施例三提供的一种增强现实的处理方法的流程示意图；
图4a是本发明实施例四提供的一种增强现实的处理方法的流程示意图；
图4b-图4e是本发明实施例四提供的在拍照过程中使用增强现实的处理方法对图像处理的示意图；
图5a是本发明实施例五提供的一种增强现实的处理方法的流程示意图；
图5b-图5d是本发明实施例五提供的在拍照过程中使用增强现实的处理方法对图像处理的示意图；
图6是本发明实施例六提供的一种增强现实的处理装置的结构示意图。
具体实施方式
下面结合附图并通过具体实施方式来进一步说明本发明的技术方案。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
在更加详细地讨论示例性实施例之前应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项步骤描述成顺序的处理，但是其中的许多步骤可以被并行地、并发地或者同时实施。此外，各项步骤的顺序可以被重新安排。当其步骤完成时所述处理可以被终止，但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
实施例一
图1是本发明实施例一提供的一种增强现实的处理方法的流程示意图。该方法可以由增强现实的处理装置执行，其中该装置可由软件和/或硬件实现，一般可集成在移动终端中。如图1所示，该方法包括：
S110、获取现实图像中的目标对象。
现实图像为摄像部件拍摄到的真实现实世界中景象，目标对象可以是现实图像中能够对其进行增强现实操作的物体，也可以是用户想要获取其增强现实内容的物体。例如，在移动终端的摄像头开启之后，对摄像头取景范围内的目标对象进行识别检测，获取识别出的目标对象。也可以是对已拍摄完成后存储的现实图像中的目标对象进行识别检测，获取识别出的目标对象。在本实施例中，目标对象可为现实图像中的人物的图像。
在本实施例中，移动终端也可将现实图像展示给用户，用户从该现实图像中选择用户想要增强的目标对象。例如，将包含人物的现实图像呈现给用户，用户点击图像中人物时，获取人物的图像信息作为目标对象。
S120、确定用户的心情的类别。
例如可以获取用户的特征信息，将特征信息传输至服务器，进行大数据处理确定用户的心情。其中，用户的特征信息可以为用户的表情、动作和声音等信息。用户的心情的类别可包括正常心情、愉悦心情或者负面心情。
其中，用户的特征信息既可以为现实图像中的人物的特征信息，也可以为当前使用移动终端拍摄现实图像的用户的特征信息。
S130、根据所述用户的心情的类别，对所述目标对象进行增强现实处理。
在确定用户的心情的类别之后，可以获取与用户的心情关联的增强现实内容，对目标图像进行增强现实处理。增强现实过程可以是对目标对象进行二维或三维渲染，也可是将增强现实内容与目标对象进行叠加或者混合，还可以是将增强现实内容融合到现实图像的场景中。例如在确定用户的心情比较愉悦时，可以获取与愉悦心情关联的增强现实内容，对目标对象进行增强处理。例如在确定用户的心情比较愉悦时，可以获取具有阳光特效的增强现实内容，将该增现实内融合到现实图像中。
本实施例提供的技术方案，获取现实图像中的目标对象，确定用户的心情的类别，根据所述用户的心情的类别，对所述目标对象进行增强现实处理。增强现实处理与用户的心情关联，根据用户心情获取相应的增强现实内容，提高增强现实处理与用户需求的匹配度，满足用户需求。
实施例二
图2是本发明实施例二提供的增强现实的处理方法的流程示意图。本实施例以上述实施例一为基础进行优化，参见图2，本实施例提供的增强现实的处理方法包括：
S210、获取现实图像中的目标对象。
S220、获取所述现实图像中的用户的特征信息。
所述用户的特征信息包括用户的脸部特征信息、肢体特征信息、语音特征信息、和生物特征信息中的至少一种信息。
S230、根据所述用户的特征信息确定用户的心情的类别。
具体地，识别出现实图像中的人物图像，获取该人物的脸部特征信息和肢体特征信息，或者通过语音识别识别获取现实图像中的人物的语音特征之后，将该人物的脸部特征信息、肢体特征信息、语音特征信息或者生物特征信息与预设脸部特征信息、预设肢体特征信息或者预设语音特征信息进行匹配，确定用户的心情的类别。
例如获取到用户的肢体特性信息后，识别出用户正在摆出“剪刀手”的造型，可以确定用户的心情比较愉悦。例如获取到用户的语音中包含歌词信息时，一般可确定用户的心情比较愉悦。
S240、根据所述用户的心情的类别，对所述目标对象进行增强现实处理。
在本实施例的另一种实施方式中，还可以获取当前拍照用户的特征信息；根据所述当前拍照用户的特征信息确定用户的心情。例如通过前置摄像头获取当前拍照用户的脸部特征信息和肢体特征信息，通过语音输入获取语音特征信息。
即获取当前拍照用户的特征信息，确定当前拍照用户的心情。可以确保与当前用户拍出与其心情匹配的图像。当前用户可以根据其心情拍摄出与其心情符合的图像。
在本实施例的另一种实施方式中，还可以根据用户的输入信息确定用户的心情的类别。例如，在移动终端界面向用户提供输入关键词的对话框，当用户输入“开心”、愉悦等词汇时候，可以确定用户的心情为愉悦心情，当用户输入“烦躁”、“伤心”等词汇的时候，可以确定用户的心情为负面心情。当用户想要拍摄出与心情的类别关联的增强现实图像时，可以输入相应的信息，移动终端根据用户输入的信息确定用户的心情类别，并根据用户的心情对目标对象进行增强现实处理。
本实施例提供的技术方案，通过获取现实图像中人物的特征信息、获取当前拍照用户的特征信息或者根据用户的输入信息，确定用户的心情的类别，获取与用户心情关联的增强现实内容，使用该增强现实内容增强目标对象。可以准确地确定用户的心情，并根据用户的心情对现实图像进行增强现实处理，可以提高拍照图像与用户需求的匹配程度，提高用户体验。
实施例三
图3是本发明实施例三提供的增强现实的处理方法的流程示意图。本实施例以上述实施例一为基础进行优化，参见图3，本实施例提供的增强现实的处理方法包括：
S310、获取现实图像中的目标对象。
S320、确定用户的心情的类别。
其中，所述用户的心情的类别包括正常心情、愉悦心情或者负面心情。
移动终端本地或者服务器存储有用户当前的心情以及用户心情的类别，获取用户的特征信息之后，可以根据用户的特征信息确定用户心情的类别。
S330、在所述心情的类别为非正常心情时，获取与所述用户的心情以及所述目标对象关联的增强现实内容。
其中，负面心情可以是心情低落或者生气、愤怒时的状态。在用户的心情为愉悦心情或者负面心情时，获取相应的增强现实内容，对目标对象进行增强。在用户的心情为正常心情时，对目标对象不进行增强现实的操作。
S340、使用所述增强现实内容对所述目标对象进行增强现实处理。
例如可以将增强现实内容的对目标对象进行渲染、将增强现实内容叠加得到目标对象的场景中或者使用增强现实内容替换目标对象等。
本实施例提供的技术方案，通过确定用户心情的类别，根据用户心情的类别确定是否对目标对象进行增强现实操作，可以实现在用户心情愉悦或者心情低落时，对目标对象进行增强现实处理，提高用户使用增强现实功能的体验。
实施例四
图4a是本发明实施例四提供的增强现实的处理方法的流程示意图。本实施例以上述实施例三为基础进行优化，参见图4a，本实施例提供的增强现实的处理方法包括：
S410、获取现实图像中的目标对象。
S420、确定用户的心情的类别。
其中，所述用户的心情的类别包括正常心情、愉悦心情或者负面心情。
S430、在所述心情的类别为非正常心情时，基于所述目标对象，获取与用户的心情的愉悦程度或者负面程度匹配的增强现实内容。
在确定用户的心情为愉悦心情或者负面心情之后，可确定用户心情的愉悦程度或者负面程度。例如可以识别出用户的表情，根据用户的表情是微笑还是大笑确定用户心情的愉悦程度；根据用户的动作幅度的大小确定用户愉悦的程度。根据用户的哭声的分贝大小确定用户心情的负面程度；根据用户的表情确定用户的愤怒程度。可以通过预先在服务器建立用户表情、动作、语言内容、和语言大小等与用户心情的愉悦程度或者负面程度的对应关系。
确定用户的心情愉悦程度或者负面程度之后，获取与用户的心情的愉悦程度或者负面程度匹配的增强现实内容。
S440、使用所述增强现实内容对所述目标对象进行增强现实处理。
示例性的用户打开拍照软件后进入拍照模式，图4b和图4c是通过移动终端摄像头获取到的两个现实图像，获取的目标对象为图像中的人物，通过识别该人物的表情和/或动作确定用户的心情为负面心情。可以看到图4b中人物的负面心情的负面程度大于图4c中人物的负面心情的负面程度。基于目标对象，获取与用户的心情的愉悦程度或者负面程度匹配的增强现实内容，对应图4b，获取的增强现实内容为下雨场景，对于图4c，获取的增强现实内容为乌云场景。使用相应的增强场景形成的增强后的图像分别如图4d和图4e所示。
本发明实施例提供的技术方案，获取现实图像中的目标对象，确定用户的心情的类别，基于目标对象，获取与用户的心情的愉悦程度或者负面程度匹配的增强现实内容，使用所述增强现实内容对所述目标对象进行增强现实处理。可以根据用户的心情对增强现实进行程度控制，根据用户开心或者不开心的程度向用户提供不同的增强现实效果的图像，提高用户体验。
实施例五
图5a是本发明实施例五提供的增强现实的处理方法的流程示意图。本实施例以上述实施例三为基础进行优化，参见图5a，本实施例提供的增强现实的处理方法包括：
S510、获取现实图像中的目标对象。
S520、确定用户的心情的类别。
其中，所述用户的心情的类别包括正常心情、愉悦心情或者负面心情。
S530、在所述心情的类别为非正常心情时，获取与所述用户的心情以及所述目标对象关联的多个增强现实内容。
在确定用户的心情为愉悦心情或者负面心情之后，可以获取与用户的心情以及目标对象关联的多个增强现实内容。例如，获取的目标对象为现实图像中的用户，确定用户的心情为愉悦心情，此时可以获取与用户的心情以及目标对象关联的多个增强现实内容，获取的增强现实内容可以为太阳、彩虹等内容。
S540、每次选择所述多个增强现实内容中至少一个对所述目标对象进行增强现实处理以形成多个增强后的图像。
对目标对象进行增强现实处理可以将增强现实内容的对目标对象进行渲染、将增强现实内容叠加得到目标对象的场景中或者使用增强现实内容替换目标对象等处理。
例如获取的多个对象中为太阳、彩虹、白云时，可以选择太阳叠加至现实图像形成第一个增强后的图像，选择太阳和彩虹叠加至现实图像形成第二个增强后的图像，选择太阳、彩虹和白云叠加至现实图像形成第三个增强后的图像。其中，在现实图像中叠加的增强现实内容越多，对现实图像的增强效果越强。
示例性的，用户打开拍照软件后进入拍照模式，图5b是通过移动终端摄像头获取到的现实图像，获取目标对象为图像中的人物，通过识别该人物的表情和/或动作确定用户的心情为愉悦心情。获取与用户的心情以及目标对象关联的两个增强现实内容，两个增强现实内容分别为太阳和彩虹。选择彩虹叠加至现实图像形成如图5c所示的图像，选择太阳和彩虹叠加至现实图像形成如图5d所示的图像。
S550、将所述形成的多个增强后的图像显示；
可以将形成的多个增强后的图像同时显示，供用户选择。
S560、保存用户从所述形成的多个增强后的图像中选择的图像。
当用户选择显示多个增强后的图像中的一个或者多个时，将用户选择的图像保存。
本发明实施例提供的技术方案，在获取与用户的心情以及目标对象关联的多个增强现实内容，每次选择多个增强现实内容中至少一个对所述目标对象进行增强现实处理以形成多个增强后的图像，可以形成多个不同增强程度效果的图像，用户可以从增强处理后的图像中选择自己喜欢的图像，并将用户选择的增强图像保存，提高提供的增强现实内容与用户需求的匹配程度，提高用户体验。
实施例六
图6是本发明实施例六提供的增强现实的处理装置的结构示意图，该装置可由软件和/或硬件实现，一般集成在移动终端中，可通过执行增强现实的处理方法来实现。参见图6，该装置包括：
目标对象获取单元610，用于获取现实图像中的目标对象；
用户心情确定单元620，用于确定用户的心情的类别；
增强现实处理单元630，用于根据所述用户的心情的类别，对所述目标对象进行增强现实处理。
进一步的，所述用户心情确定单元620包括：
第一特征信息获取子单元621，用于获取所述现实图像中的用户的特征信息；
第一用户心情确定子单元622，用于根据所述用户的特征信息确定用户的心情的类别。
进一步的，所述用户心情确定单元620包括：
第二特征信息获取子单元623，用于获取当前拍照用户的特征信息；
第二用户心情确定子单元624，用于根据所述当前拍照用户的特征信息确定用户的心情的类别。
其中，所述用户的特征信息包括用户的脸部特征信息、肢体特征信息、语音特征信息、和生物特征信息中的至少一种信息。
进一步的，所述用户心情确定单元620具体用于：
根据用户的输入信息确定用户的心情的类别。
进一步的，所述增强现实处理单元630包括：
增强现实内容获取子单元631，用于在所述心情的类别为非正常心情时，获取与所述用户的心情以及所述目标对象关联的增强现实内容；
图像增强子单元632，用于使用所述增强现实内容对所述目标对象进行增强现实处理；
其中，所述用户的心情的类别包括正常心情、愉悦心情或者负面心情。
进一步的，所述增强现实内容获取子单元631用于：
基于所述目标对象，获取与用户的心情的愉悦程度或者负面程度匹配的增强现实内容。
进一步的，所述增强现实内容获取子单元631用于：
获取与所述用户的心情以及所述目标对象关联的多个增强现实内容；
所述图像增强子单元632用于：
每次选择所述多个增强现实内容中至少一个对所述目标对象进行增强现实处理以形成多个增强后的图像。
进一步的，所述装置还包括：
图像显示单元640，用于在所述使用所述增强现实内容对所述目标对象进行增强现实处理之后，将所述形成的多个增强后的图像显示；
图像保存单元650，用于保存用户从所述形成的多个增强后的图像中选择的图像。
上述装置可执行本发明任意实施例所提供增强现实的处理方法，具备执行上述方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节，可参见本发明实施例所提供的方法。
另外，本发明实施例还提供了一种移动终端，包括本发明实施例六所提供的装置，能够执行本发明任意实施例所提供的方法。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (19)

1.一种增强现实的处理方法，其特征在于，包括：
获取现实图像中的目标对象；
确定用户的心情的类别；
根据所述用户的心情的类别，对所述目标对象进行增强现实处理。
2.根据权利要求1所述的方法，其特征在于，所述确定用户的心情的类别，包括：
获取所述现实图像中的用户的特征信息；
根据所述用户的特征信息确定用户的心情的类别。
3.根据权利要求1所述的方法，其特征在于，所述确定用户的心情的类别，包括：
获取当前拍照用户的特征信息；
根据所述当前拍照用户的特征信息确定用户的心情的类别。
4.根据权利要求2或3所述的方法，其特征在于，所述用户的特征信息包括用户的脸部特征信息、肢体特征信息、语音特征信息、和生物特征信息中的至少一种信息。
5.根据权利要求1所述的方法，其特征在于，所述确定用户的心情的类别，包括：
根据用户的输入信息确定用户的心情的类别。
6.根据权利要求1所述的方法，其特征在于，所述根据所述用户的心情的类别，对所述目标对象进行增强现实处理，包括：
在所述心情的类别为非正常心情时，获取与所述用户的心情以及所述目标对象关联的增强现实内容；
使用所述增强现实内容对所述目标对象进行增强现实处理；
其中，所述用户的心情的类别包括正常心情、愉悦心情或者负面心情。
7.根据权利要求6所述的方法，其特征在于，所述获取与所述用户的心情以及所述目标对象关联的增强现实内容，包括：
基于所述目标对象，获取与用户的心情的愉悦程度或者负面程度匹配的增强现实内容。
8.根据权利要求6所述的方法，其特征在于，所述获取与所述用户的心情以及所述目标对象关联的增强现实内容，包括：
获取与所述用户的心情以及所述目标对象关联的多个增强现实内容；
所述使用所述增强现实内容对所述目标对象进行增强现实处理，包括：
每次选择所述多个增强现实内容中至少一个对所述目标对象进行增强现实处理以形成多个增强后的图像。
9.根据权利要求8所述的方法，其特征在于，在所述使用所述增强现实内容对所述目标对象进行增强现实处理之后，还包括：
将所述形成的多个增强后的图像显示；
保存用户从所述形成的多个增强后的图像中选择的图像。
10.一种增强现实的处理装置，其特征在于，包括：
目标对象获取单元，用于获取现实图像中的目标对象；
用户心情确定单元，用于确定用户的心情的类别；
增强现实处理单元，用于根据所述用户的心情的类别，对所述目标对象进行增强现实处理。
11.根据权利要求10所述的装置，其特征在于，所述用户心情确定单元包括：
第一特征信息获取子单元，用于获取所述现实图像中的用户的特征信息；
第一用户心情确定子单元，用于根据所述用户的特征信息确定用户的心情的类别。
12.根据权利要求10所述的装置，其特征在于，所述用户心情确定单元包括：
第二特征信息获取子单元，用于获取当前拍照用户的特征信息；
第二用户心情确定子单元，用于根据所述当前拍照用户的特征信息确定用户的心情的类别。
13.根据权利要求11或12所述的装置，其特征在于，所述用户的特征信息包括用户的脸部特征信息、肢体特征信息、语音特征信息、和生物特征信息中的至少一种信息。
14.根据权利要求10所述的装置，其特征在于，所述用户心情确定单元具体用于：
根据用户的输入信息确定用户的心情的类别。
15.根据权利要求10所述的装置，其特征在于，
所述增强现实处理单元包括：
增强现实内容获取子单元，用于在所述心情的类别为非正常心情时，获取与所述用户的心情以及所述目标对象关联的增强现实内容；
图像增强子单元，用于使用所述增强现实内容对所述目标对象进行增强现实处理；
其中，所述用户的心情的类别包括正常心情、愉悦心情或者负面心情。
16.根据权利要求15所述的装置，其特征在于，所述增强现实内容获取子单元用于：
基于所述目标对象，获取与用户的心情的愉悦程度或者负面程度匹配的增强现实内容。
17.根据权利要求15所述的装置，其特征在于，所述增强现实内容获取子单元用于：
获取与所述用户的心情以及所述目标对象关联的多个增强现实内容；
所述图像增强子单元用于：
每次选择所述多个增强现实内容中至少一个对所述目标对象进行增强现实处理以形成多个增强后的图像。
18.根据权利要求17所述的装置，其特征在于，还包括：
图像显示单元，用于在所述使用所述增强现实内容对所述目标对象进行增强现实处理之后，将所述形成的多个增强后的图像显示；
图像保存单元，用于保存用户从所述形成的多个增强后的图像中选择的图像。
19.一种移动终端，其特征在于，包括权利要求10-18任一项所述的增强现实内容的处理装置。
CN201610507156.8A 2016-06-28 2016-06-28 一种增强现实的处理方法、装置及移动终端 Pending CN106127828A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610507156.8A CN106127828A (zh) 2016-06-28 2016-06-28 一种增强现实的处理方法、装置及移动终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610507156.8A CN106127828A (zh) 2016-06-28 2016-06-28 一种增强现实的处理方法、装置及移动终端

Publications (1)

Publication Number Publication Date
CN106127828A true CN106127828A (zh) 2016-11-16

Family

ID=57467860

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610507156.8A Pending CN106127828A (zh) 2016-06-28 2016-06-28 一种增强现实的处理方法、装置及移动终端

Country Status (1)

Country Link
CN (1) CN106127828A (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107437272A (zh) * 2017-08-31 2017-12-05 深圳锐取信息技术股份有限公司 基于增强现实的互动娱乐方法、装置及终端设备
CN108563327A (zh) * 2018-03-26 2018-09-21 广东欧珀移动通信有限公司 增强现实方法、装置、存储介质及电子设备
CN108921941A (zh) * 2018-07-10 2018-11-30 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质和电子设备
CN109656362A (zh) * 2018-12-14 2019-04-19 歌尔科技有限公司 虚拟增强现实设备及其控制方法、系统、计算机存储介质
WO2019114464A1 (zh) * 2017-12-11 2019-06-20 北京京东尚科信息技术有限公司 增强现实方法和装置
CN110352595A (zh) * 2016-12-30 2019-10-18 脸谱公司 用于提供增强现实叠加的系统和方法
CN111507143A (zh) * 2019-01-31 2020-08-07 北京字节跳动网络技术有限公司 表情图像效果生成方法、装置和电子设备
CN111640199A (zh) * 2020-06-10 2020-09-08 浙江商汤科技开发有限公司 一种ar特效数据生成的方法及装置
CN111865766A (zh) * 2020-07-20 2020-10-30 上海博泰悦臻电子设备制造有限公司 基于音像传输的互动方法、介质、设备及系统
CN112330477A (zh) * 2019-08-01 2021-02-05 脸谱公司 为社交媒体内容生成定制的个性化反应

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1794265A (zh) * 2005-12-31 2006-06-28 北京中星微电子有限公司 基于视频的面部表情识别方法及装置
CN101247482A (zh) * 2007-05-16 2008-08-20 北京思比科微电子技术有限公司 一种实现动态图像处理的方法和装置
CN101370195A (zh) * 2007-08-16 2009-02-18 英华达(上海)电子有限公司 移动终端中实现情绪调节的方法及装置
CN101917585A (zh) * 2010-08-13 2010-12-15 宇龙计算机通信科技(深圳)有限公司 调节视频电话向对端发送的视频信息的方法、装置及终端
WO2013027893A1 (ko) * 2011-08-22 2013-02-28 Kang Jun-Kyu 통신단말장치의 감정 컨텐츠 서비스 장치 및 방법, 이를 위한 감정 인지 장치 및 방법, 이를 이용한 감정 컨텐츠를 생성하고 정합하는 장치 및 방법
CN103297742A (zh) * 2012-02-27 2013-09-11 联想(北京)有限公司 数据处理方法、微处理器、通信终端及服务器
CN104244824A (zh) * 2012-04-10 2014-12-24 株式会社电装 情绪监视系统
CN104780338A (zh) * 2015-04-16 2015-07-15 美国掌赢信息科技有限公司 一种即时视频中的表情特效动画加载方法和电子设备

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1794265A (zh) * 2005-12-31 2006-06-28 北京中星微电子有限公司 基于视频的面部表情识别方法及装置
CN101247482A (zh) * 2007-05-16 2008-08-20 北京思比科微电子技术有限公司 一种实现动态图像处理的方法和装置
CN101370195A (zh) * 2007-08-16 2009-02-18 英华达(上海)电子有限公司 移动终端中实现情绪调节的方法及装置
CN101917585A (zh) * 2010-08-13 2010-12-15 宇龙计算机通信科技(深圳)有限公司 调节视频电话向对端发送的视频信息的方法、装置及终端
WO2013027893A1 (ko) * 2011-08-22 2013-02-28 Kang Jun-Kyu 통신단말장치의 감정 컨텐츠 서비스 장치 및 방법, 이를 위한 감정 인지 장치 및 방법, 이를 이용한 감정 컨텐츠를 생성하고 정합하는 장치 및 방법
CN103297742A (zh) * 2012-02-27 2013-09-11 联想(北京)有限公司 数据处理方法、微处理器、通信终端及服务器
CN104244824A (zh) * 2012-04-10 2014-12-24 株式会社电装 情绪监视系统
CN104780338A (zh) * 2015-04-16 2015-07-15 美国掌赢信息科技有限公司 一种即时视频中的表情特效动画加载方法和电子设备

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110352595B (zh) * 2016-12-30 2021-08-17 脸谱公司 用于提供增强现实叠加的系统和方法
US11030440B2 (en) 2016-12-30 2021-06-08 Facebook, Inc. Systems and methods for providing augmented reality overlays
CN110352595A (zh) * 2016-12-30 2019-10-18 脸谱公司 用于提供增强现实叠加的系统和方法
CN107437272A (zh) * 2017-08-31 2017-12-05 深圳锐取信息技术股份有限公司 基于增强现实的互动娱乐方法、装置及终端设备
WO2019114464A1 (zh) * 2017-12-11 2019-06-20 北京京东尚科信息技术有限公司 增强现实方法和装置
US11257293B2 (en) 2017-12-11 2022-02-22 Beijing Jingdong Shangke Information Technology Co., Ltd. Augmented reality method and device fusing image-based target state data and sound-based target state data
CN108563327B (zh) * 2018-03-26 2020-12-01 Oppo广东移动通信有限公司 增强现实方法、装置、存储介质及电子设备
CN108563327A (zh) * 2018-03-26 2018-09-21 广东欧珀移动通信有限公司 增强现实方法、装置、存储介质及电子设备
CN108921941A (zh) * 2018-07-10 2018-11-30 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质和电子设备
CN109656362A (zh) * 2018-12-14 2019-04-19 歌尔科技有限公司 虚拟增强现实设备及其控制方法、系统、计算机存储介质
CN109656362B (zh) * 2018-12-14 2022-02-18 歌尔光学科技有限公司 虚拟增强现实设备及其控制方法、系统、计算机存储介质
CN111507143A (zh) * 2019-01-31 2020-08-07 北京字节跳动网络技术有限公司 表情图像效果生成方法、装置和电子设备
CN111507143B (zh) * 2019-01-31 2023-06-02 北京字节跳动网络技术有限公司 表情图像效果生成方法、装置和电子设备
CN112330477A (zh) * 2019-08-01 2021-02-05 脸谱公司 为社交媒体内容生成定制的个性化反应
CN111640199A (zh) * 2020-06-10 2020-09-08 浙江商汤科技开发有限公司 一种ar特效数据生成的方法及装置
CN111640199B (zh) * 2020-06-10 2024-01-09 浙江商汤科技开发有限公司 一种ar特效数据生成的方法及装置
CN111865766A (zh) * 2020-07-20 2020-10-30 上海博泰悦臻电子设备制造有限公司 基于音像传输的互动方法、介质、设备及系统
CN111865766B (zh) * 2020-07-20 2024-02-02 博泰车联网科技(上海)股份有限公司 基于音像传输的互动方法、介质、设备及系统

Similar Documents

Publication Publication Date Title
CN106127828A (zh) 一种增强现实的处理方法、装置及移动终端
US11182615B2 (en) Method and apparatus, and storage medium for image data processing on real object and virtual object
KR20210123399A (ko) 인공 지능에 기초한 애니메이션 이미지 구동 방법, 및 관련 디바이스
CN111541908A (zh) 交互方法、装置、设备以及存储介质
CN114930399A (zh) 使用基于表面的神经合成的图像生成
KR101887637B1 (ko) 로봇 시스템
CN110555507B (zh) 虚拟机器人的交互方法、装置、电子设备及存储介质
JP2021526698A (ja) 画像生成方法および装置、電子機器、並びに記憶媒体
CN110942501B (zh) 虚拟形象切换方法、装置、电子设备及存储介质
US11790614B2 (en) Inferring intent from pose and speech input
CN106200918A (zh) 一种基于ar的信息显示方法、装置和移动终端
KR102148151B1 (ko) 디지털 커뮤니케이션 네트워크에 기반한 지능형 채팅
CN107333086A (zh) 一种在虚拟场景中进行视频通信的方法及装置
CN107992507A (zh) 一种儿童智能对话学习方法、系统及电子设备
US11076091B1 (en) Image capturing assistant
CN110794964A (zh) 虚拟机器人的交互方法、装置、电子设备及存储介质
CN112204565A (zh) 用于基于视觉背景无关语法模型推断场景的系统和方法
CN113362263A (zh) 变换虚拟偶像的形象的方法、设备、介质及程序产品
CN108156385A (zh) 图像获取方法及图像获取装置
CN110210449A (zh) 一种用于虚拟现实交友的人脸识别系统及方法
CN110928411A (zh) 一种基于ar的交互方法、装置、存储介质及电子设备
CN106157262A (zh) 一种增强现实的处理方法、装置和移动终端
CN112669422A (zh) 仿真3d数字人生成方法、装置、电子设备及存储介质
CN113903067A (zh) 虚拟对象视频的生成方法、装置、设备及介质
CN110084180A (zh) 关键点检测方法、装置、电子设备及可读存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20161116

RJ01 Rejection of invention patent application after publication