CN106127829A - 一种增强现实的处理方法、装置及终端 - Google Patents

一种增强现实的处理方法、装置及终端 Download PDF

Info

Publication number
CN106127829A
CN106127829A CN201610507251.8A CN201610507251A CN106127829A CN 106127829 A CN106127829 A CN 106127829A CN 201610507251 A CN201610507251 A CN 201610507251A CN 106127829 A CN106127829 A CN 106127829A
Authority
CN
China
Prior art keywords
augmented reality
frame picture
target frame
potential event
event
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610507251.8A
Other languages
English (en)
Other versions
CN106127829B (zh
Inventor
曾元清
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201610507251.8A priority Critical patent/CN106127829B/zh
Publication of CN106127829A publication Critical patent/CN106127829A/zh
Application granted granted Critical
Publication of CN106127829B publication Critical patent/CN106127829B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/005General purpose rendering architectures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/44Event detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明公开了一种增强现实的处理方法、装置及终端。该方法包括:获取目标帧画面关联的潜在事件;获取所述潜在事件对应的增强现实内容;根据所述增强现实内容对所述目标帧画面进行增强现实处理。本发明实施例能够在获取目标帧画面关联的潜在事件以及该潜在事件对应的增强现实内容,然后根据得到的增强现实内容对目标帧画面进行增强现实处理。本发明实施例能够使用目标帧画面的潜在事件对应的增强现实内容对目标帧画面进行增强现实处理,使得进行增强现实处理后的目标帧画面除了记录有目标帧画面中的画面信息,还包括潜在事件对应的增强现实内容,丰富照片信息承载内容,且图片的数据量大小适当。

Description

一种增强现实的处理方法、装置及终端
技术领域
本发明实施例涉及增强现实技术,尤其涉及一种增强现实的处理方法、装置及终端。
背景技术
随着智能手机等智能终端上的拍照功能日趋成熟,用户使用智能手机等智能终端进行拍照和录像的频率越来越高。
在拍照时,智能终端通过显示屏显示摄像头获取的帧画面,用户点击拍照按钮后将当前获取的帧画面作为一张照片进行存储。在录像时,智能终端通过摄像头连续获取多张联系的帧画面,将多张帧画面组成一段视频。
然而,由于照片承载的信息量有限导致照片无法全面地表达拍照时的场景情况。同时录像数据虽然能够全面的表达拍照时的场景信息,但是录像数据的数据量庞大。
发明内容
本发明提供一种增强现实的处理方法、装置及终端,实现通过增强现实处理得到的照片的数据量大小适当且能够表达拍照时的场景信息。
第一方面,本发明实施例提供了一种增强现实的处理方法,包括:
获取目标帧画面关联的潜在事件;
获取所述潜在事件对应的增强现实内容;
根据所述增强现实内容对所述目标帧画面进行增强现实处理。
第二方面,本发明实施例还提供了一种增强现实的处理装置,包括:
潜在事件获取单元,用于获取目标帧画面关联的潜在事件;
增强现实内容获取单元,用于获取所述潜在事件获取单元获取的所述潜在事件对应的增强现实内容;
增强现实处理单元,用于根据所述增强现实内容获取单元获取的所述增强现实内容对所述目标帧画面进行增强现实处理。
第三方面,本发明实施例还提供了一种终端,包括第二方面所示的增强现实的处理装置。
本发明实施例能够在获取目标帧画面关联的潜在事件以及该潜在事件对应的增强现实内容,然后根据得到的增强现实内容对目标帧画面进行增强现实处理。现有技术中照片所承载信息量过小而录像需要占用大量的存储空间。本发明实施例能够使用目标帧画面的潜在事件对应的增强现实内容对目标帧画面进行增强现实处理,使得进行增强现实处理后的目标帧画面除了记录有目标帧画面中的画面信息,还包括潜在事件对应的增强现实内容,丰富照片信息承载内容,且图片的数据量大小适当。
附图说明
图1是本发明实施例一中的增强现实的处理方法的流程图;
图2是本发明实施例一中的增项现实处理效果示意图;
图3是本发明实施例二中的增强现实的处理方法的流程图;
图4是本发明实施例三中的增强现实的处理方法的流程图;
图5是本发明实施例四中的增强现实的处理方法的流程图;
图6是本发明实施例五中的增强现实的处理方法的流程图;
图7是本发明实施例六中的增强现实的处理装置的结构示意图;
图8是本发明实施例七中的移动终端的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的一种增强现实的处理方法的流程图,本实施例可适用于对图片或帧画面进行增强现实处理的情况,该方法可以由智能手机、平板电脑等智能终端来执行,具体包括如下步骤:
步骤110、获取目标帧画面关联的潜在事件。
需要说明的是本发明各实施例中目标帧画面可以为拍照得到的照片,也可以为拍照过程中显示屏中显示的帧画面。
可选的,在浏览拍照得到的照片时,将照片作为目标帧画面。获取照片关联的潜在事件。
可选的,在拍照时获取目标帧画面关联的潜在事件。将摄像头获取的帧画面实时地通过显示屏进行显示。目标帧画面可以为显示屏中显示的当前帧画面。由于摄像头获取的帧画面可能随时发生变化,因此目标帧画面还可以为拍照者在某一时刻选择的该时刻对应的帧画面。例如,如果用户在10:00对显示屏中显示的帧画面的某个目标图像区域进行了调整,则确定用户在10:00选择将10:00显示屏中显示的帧画面确定为目标帧画面。
潜在事件用于表示拍照目标帧画面时被拍摄对象或者拍照者所处的环境,如送别、观看比赛、用餐等。目标帧画面关联的潜在事件可通过时间戳查找目标帧画面对应的背景音数据,然后通过目标帧画面对应的背景音数据确定潜在事件。目标帧画面关联的潜在事件还可通过目标帧画面中包含的图像内容确定事件图像特征,然后根据事件图像特征确定潜在事件。
步骤120、获取潜在事件对应的增强现实内容。
可通过预设增强现实数据库存储潜在事件对应的增强现实内容。增强现实内容可以为二维图像也可以为三维图像。二维图像如剪切画、照片等。预设增强现实数据库可位于本地,也可位于网络侧服务器中。此外,还可绘制增强现实内容。绘制时,可根据潜在事件的类别确定增强现实内容的模型,进而确定增强现实内容的模型的轮廓的尺寸。进一步的,根据目标帧画面中的颜色信息对增强现实内容的模型进行上色。颜色信息可以为亮度值、对比度等。绘制出的模型以及模型的尺寸和颜色均可由用户进行调整。
步骤130、根据增强现实内容对目标帧画面进行增强现实处理。
首先,将增强现实内容添加到目标帧画面中,得到增强帧画面。
可以在目标帧画面中的预设位置添加增强现实内容。预设位置可以为固定位置,如目标帧画面的右上角,或左下角。预设位置还可以与增强现实内容的具体数据内容对应。例如:在屏幕右上角显示“送别”的增强现实内容;在屏幕低端显示“赛场加油”的增强现实内容等。将添加有增强现实内容的目标帧画面称为增强帧画面。又例如,如图2所示,在屏幕低端添加“送别”的增强现实内容,屏幕上方为目标帧画面图像。其中,“送别”的增强现实内容为人物回收的背影,优选为拍照者自己的背影。
然后,输出增强帧画面,以便用户根据增强帧画面进行拍照。
在显示屏中显示步骤130得到的增强帧画面。用户可对增强帧画面进行调整,如删除已添加的增强现实内容,或者添加未显示在增强帧画面中的其他增强现实内容。用户点击拍照按钮触发拍照指令进行拍照,终端将显示屏现实的帧画面进行存储,得到一张增强现实照片。
可选的,进行增强现实处理还可包括根据增强现实内容对目标帧画面进行光线调整以及二维处理或三维处理。例如,若潜在事件为下雨天气,则在目标帧画面中添加雨点,雨点可以为按照风向进行倾斜的雨点。没过雨点可通过增加三维处理实现具有透明度的三维雨点的效果。
本实施例能够在获取目标帧画面关联的潜在事件以及该潜在事件对应的增强现实内容,然后根据得到的增强现实内容对目标帧画面进行增强现实处理。现有技术中照片所承载信息量过小而录像需要占用大量的存储空间。本实施例能够使用目标帧画面的潜在事件对应的增强现实内容对目标帧画面进行增强现实处理,使得进行增强现实处理后的目标帧画面除了记录有目标帧画面中的画面信息,还包括潜在事件对应的增强现实内容,丰富照片信息承载内容,且图片的数据量大小适当。
实施例二
图3为本发明实施例二提供的一种增强现实的处理方法的流程图,作为对实施例一的进一步说明,步骤110、获取目标帧画面关联的潜在事件,可通过下述方式进行实施:
步骤111a、获取目标帧画面对应的背景音数据。
示例性的,在启动具有拍照功能的应用时,通过麦克风进行录音。其中,具有拍照功能的应用包括拍照应用或者拍照功能作为应用中的插件的应用。当用户启动拍照功能时,用户可点击增强现实内容获取按钮,用户点击增强现实内容获取按钮后,开始执行步骤111a。
在获取背景音数据时,首选获取目标帧画面的时间信息,然后根据该时间信息确定包含该时间信息的背景音数据。可选的,背景音数据的截止时间为目标帧画面的时间信息。进一步的,每个背景音数据的时长为固定时长,如30秒、1分钟或5分钟。
步骤112a、根据预设事件音频特征对所述背景音数据进行音频分析,得到所述目标帧画面关联的潜在事件。
预设事件音频特征为潜在事件对应的音频特征。例如:“送别”潜在事件对应的预设事件音频特征为“再见”、“路上小心”、“保重身体”等对应的音频数据。又例如:“赛场加油”潜在事件对应的预设事件音频特征为“加油”、“防守”、“好球”等对应的音频数据。
若背景音数据中包含预设事件音频特征,则可根据包含的预设事件音频特征确定相应的潜在事件。预设事件音频特征与潜在事件的对应关系可以由用户认为设置或者为出厂设置,也可以通过网络进行匹配。
进一步的,由于背景音数据中可能存在较多的噪声,为了提高背景音数据的清晰度,可对音频数据进行去噪处理。
进一步的,背景音数据中可能存在不同人物的声音数据,因此对背景音数据进行滤波,得到不同人物的声音数据。然后,分别根据每个人物的音频数据确定潜在事件。若根据N个人物确定出M个不同的潜在事件(N大于M),则可以向目标帧画面中添加M个潜在事件对应的M个增强现实内容;或者,也可向目标帧画面中添加音量最大的人物对应的潜在事件的增强现实内容。
本实施例能够根据背景音数据确定潜在事件,进而将拍照时的音频数据通过增强现实内容的方式添加到目标帧画面中,提高照片包含的信息量,提高用户体验。
实施例三
图4为本发明实施例三提供的一种增强现实的处理方法的流程图,作为对上述实施例的进一步说明,步骤110、获取目标帧画面关联的潜在事件,可通过下述方式进行实施:
步骤111b、对目标帧画面进行图像分析,得到目标帧画面包含的事件图像特征。
对目标帧画面进行轮廓分析,得到不同的轮廓区域。对每个轮廓区域中的内容进行事件分析,得到事件图像特征。其中,轮廓分析可以得到目标帧画面中不同物体的轮廓,根据物体的轮廓可确定目标图像包含的物体,以及物体的形态。例如,目标图像中包含多个人物,多个人物均在挥手,则挥手的人物为事件图像特征。目标图像中还包括记分牌,记分牌中有比分以及两个队伍的名称,则带有分数的记分牌为事件图像特征。又例如,目标图像中包含多个人物,且多个人物与背包或行李箱相邻,则携带有行李箱的人物为事件图像特征。若目标图像中还包括火车后汽车车厢或车窗,则交通工具为事件图像特征。
步骤112b、根据事件图像特征确定目标帧画面关联的潜在事件。
根据目标帧画面中包含的至少一个事件图像特征确定潜在事件。例如,“加油”事件对应的事件图像特征为:“挥手的人物”和“带有分数的记分牌”,则根据“挥手的人物”和“带有分数的记分牌”可确定对应的潜在事件为“加油”潜在事件。又例如,“送别”事件对应的事件图像特征为:“携带有行李箱的人物”和“交通工具”,则根据“携带有行李箱的人物”和“交通工具”可确定对应的潜在事件为“送别”潜在事件。
本实施例能够根据目标帧画面包含的事件图像特征确定潜在事件,实现在目标帧画面中增加事件图像特征对应的增强现实内容,进而无需启动麦克风接口添加增强现实内容,丰富照片内容,提高用于体验。
实施例四
图5为本发明实施例四提供的增强现实的处理方法的流程图,作为对上述实施例的进一步说明,步骤120、获取潜在事件对应的增强现实内容,可通过下述方式进行实施:
步骤120a、根据潜在事件的特征信息生成潜在事件对应的增强现实内容。
潜在事件的特征信息可以为行为信息或对象信息。行为信息表示潜在事件对应的行为动作,对象信息表示潜在对象指向的任务或事物。例如,潜在事件为“送别”潜在事件,由于送别为人物之间的行为,因此在生成“送别”潜在事件时,可生成一个正在挥手送别的人物的虚拟现实内容。
或者,步骤120、获取潜在事件对应的增强现实内容,可通过下述方式进行实施:根据潜在事件的特征信息从预设增强现实数据库中查找特征信息对应的预设增强现实内容。
可选的,根据潜在事件的特征信息在网络上进行搜索,查找相应的增强现实内容。
可选的,判断预设增强现实数据库中是否存在潜在事件对应的预设增强现实内容。如果预设增强现实数据库中存在该预设增强现实内容,则将读取该预设增强现实内容。如果预设增强现实数据库中不存在该预设增强现实内容,则根据潜在事件的特征信息生成潜在事件对应的增强现实内容。
本实施例能够生成或者查找潜在事件对应的增强现实内容,丰富增强现实内容的来源,提高增项显示内容的可靠性。
实施例五
图6为本发明实施例五提供的增强现实的处理方法的流程图,作为对上述实施例的进一步说明,在步骤130、根据所述增强现实内容对所述目标帧画面进行增强现实处理之后,还包括:
步骤140、根据用户输入的调整指令对增强现实内容的属性信息进行调整。
其中,属性信息为下述至少一个信息:位置信息、显示方向信息、显示比例信息。
当显示屏中显示有添加的增强现实内容后,用户可对增强现实内容进行拖拽以实现平移。用户还可拉伸增强现实内容,以调整增强现实内容的显示比例。用户还可控制增强现实内容的顶点进行移动使得增强现实内容进行旋转,进而调整增强现实内容的显示方向。
除了通过显示屏输入调整指令,还可通过音频指令或者空中手势输入相应调整指令。
本实施例能够为用户提供增强现实内容的调整功能,使得用户可以对根据个人需求对增强现实内容进行调整,提高用户体验以及增强现实拍照功能的易用性。
实施例六
图7为本发明实施例六提供的一种增强现实的处理装置的结构示意图,上述装置用于实现上述实施例提供的增强现实的处理方法,该装置包括:
潜在事件获取单元11,用于获取目标帧画面关联的潜在事件;
增强现实内容获取单元12,用于获取所述潜在事件获取单元11获取的所述潜在事件对应的增强现实内容;
增强现实处理单元13,用于根据所述增强现实内容获取单元12获取的所述增强现实内容对所述目标帧画面进行增强现实处理。
进一步的,所述潜在事件获取单元11具体用于:
获取目标帧画面对应的背景音数据;
根据预设事件音频特征对所述背景音数据进行音频分析,得到所述目标帧画面关联的潜在事件。
进一步的,所述潜在事件获取单元11具体用于:
对目标帧画面进行图像分析,得到所述目标帧画面包含的事件图像特征;
根据所述事件图像特征确定所述目标帧画面关联的潜在事件。
进一步的,所述增强现实内容获取单元12具体用于:
根据所述潜在事件获取单元11获取的所述潜在事件的特征信息生成所述潜在事件对应的增强现实内容;或者,
根据所述潜在事件获取单元11获取的所述潜在事件的特征信息从预设增强现实数据库中查找所述特征信息对应的预设增强现实内容。
进一步的,还包括:
接收单元14,用于接收用户输入的调整指令;
调整单元15,用于根据所述接收单元14接收的所述用户输入的调整指令对所述增强现实内容的属性信息进行调整,所述属性信息为下述至少一个信息:位置信息、显示方向信息、显示比例信息。
上述装置可执行本发明实施例一至实施例五所提供的方法,具备执行上述方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,可参见本发明实施例一至实施例五所提供的方法。
进一步的,本发明实施例还提供一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行一种增强现实的处理方法,该方法包括:
获取目标帧画面关联的潜在事件;
获取所述潜在事件对应的增强现实内容;
将所述增强现实内容添加到所述目标帧画面中,得到增强帧画面;
输出所述增强帧画面,以便用户根据所述增强帧画面进行拍照。
可选的,该计算机可执行指令在由计算机处理器执行时还可以用于执行本发明任意实施例所提供的增强现实的处理方法的技术方案。
通过以上关于实施方式的描述,所属领域的技术人员可以清楚地了解到,本发明可借助软件及必需的通用硬件来实现,当然也可以通过硬件实现,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
实施例七
图8为本发明实施例七提供的一种终端的结构示意图,所述终端包括实施例六所示的增强现实的处理装置。在一种实现方式中终端为移动终端,如智能手机或平板电脑。该移动终端可以包括通信单元21、包括有至少一个计算机可读存储介质的存储器22、输入单元23、显示单元24、传感器25、音频电路26、WIFI(Wireless Fidelity,无线保真)模块27、包括有至少一个处理核心的处理器28、以及电源29等部件。本领域技术人员可以理解,图中示出的移动终端结构并不构成对移动终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。具体的:
通信单元21可用于收发信息或通话过程中,信号的接收和发送,该通信单元21可以为RF(Radio Frequency,射频)电路、路由器、调制解调器、等网络通信设备。特别地,当通信单元21为RF电路时,将基站的下行信息接收后,交由一个或者一个以上处理器28处理;另外,将涉及上行的数据发送给基站。通常,作为通信单元的RF电路包括但不限于天线、至少一个放大器、调谐器、一个或多个振荡器、用户身份模块(SIM)卡、收发信机、耦合器、LNA(Low Noise Amplifier,低噪声放大器)、双工器等。此外,通信单元21还可以通过无线通信与网络和其他设备通信。所述无线通信可以使用任一通信标准或协议,包括但不限于GSM(Global System of Mobile communication,全球移动通讯系统)、GPRS(General PacketRadio Service,通用分组无线服务)、CDMA(Code Division Multiple Access,码分多址)、WCDMA(Wideband Code Division Multiple Access,宽带码分多址)、LTE(Long TermEvolution,长期演进)、电子邮件、SMS(Short Messaging Service,短消息服务)等。存储器22可用于存储软件程序以及模块,处理器28通过运行存储在存储器22的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器22可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据移动终端的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器22可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器22还可以包括存储器控制器,以提供处理器28和输入单元23对存储器22的访问。
输入单元23可用于接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。优选地,输入单元23可包括触敏表面231以及其他输入设备232。触敏表面231,也称为触摸显示屏或者触控板,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触敏表面231上或在触敏表面231附近的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触敏表面231可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器28,并能接收处理器28发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触敏表面231。除了触敏表面231,输入单元23还可以包括其他输入设备232。优选地,其他输入设备232可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
显示单元24可用于显示由用户输入的信息或提供给用户的信息以及移动终端的各种图形用户接口,这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元24可包括显示面板241,可选的,可以采用LCD(Liquid Crystal Display,液晶显示器)、OLED(Organic Light-Emitting Diode,有机发光二极管)等形式来配置显示面板241。进一步的,触敏表面231可覆盖显示面板241,当触敏表面231检测到在其上或附近的触摸操作后,传送给处理器28以确定触摸事件的类型,随后处理器28根据触摸事件的类型在显示面板241上提供相应的视觉输出。虽然在图7中,触敏表面231与显示面板241是作为两个独立的部件来实现输入和输入功能,但是在某些实施例中,可以将触敏表面231与显示面板241集成而实现输入和输出功能。
移动终端还可包括至少一种传感器25,比如光传感器、运动传感器以及其他传感器。光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板241的亮度,接近传感器可在移动终端移动到耳边时,关闭显示面板241和/或背光。作为运动传感器的一种,重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;移动终端还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
音频电路26、扬声器261,传声器262可提供用户与移动终端之间的音频接口。音频电路26可将接收到的音频数据转换后的电信号,传输到扬声器261,由扬声器261转换为声音信号输出;另一方面,传声器262将收集的声音信号转换为电信号,由音频电路26接收后转换为音频数据,再将音频数据输出处理器28处理后,经RF电路21以发送给比如另一移动终端,或者将音频数据输出至存储器22以便进一步处理。音频电路26还可能包括耳塞插孔,以提供外设耳机与移动终端的通信。
为了实现无线通信,该第一移动终端上可以配置有无线通信单元27,该无线通信单元27可以为WIFI模块。WIFI属于短距离无线传输技术,移动终端通过无线通信单元27可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图中示出了无线通信单元27,但是可以理解的是,其并不属于移动终端的必须构成,完全可以根据需要在不改变公开的本质的范围内而省略。
处理器28可利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器22内的软件程序和/或模块,以及调用存储在存储器22内的数据,执行移动终端的各种功能和处理数据,从而对手机进行整体监控。可选的,处理器28可包括一个或多个处理核心;优选的,处理器28可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器28中。
移动终端还包括给各个部件供电的电源29(比如电池),优选的,电源可以通过电源管理系统与处理器28逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源29还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
需要说明的是,移动终端还可以包括摄像头、蓝牙模块等,在此不再赘述。
在本实施例中,所述处理器28用于:
获取目标帧画面关联的潜在事件;
获取所述潜在事件对应的增强现实内容;
根据所述增强现实内容对所述目标帧画面进行增强现实处理。
进一步的,所述获取目标帧画面关联的潜在事件,包括:
获取目标帧画面对应的背景音数据;
根据预设事件音频特征对所述背景音数据进行音频分析,得到所述目标帧画面关联的潜在事件。
进一步的,所述获取目标帧画面关联的潜在事件,包括:
对目标帧画面进行图像分析,得到所述目标帧画面包含的事件图像特征;
根据所述事件图像特征确定所述目标帧画面关联的潜在事件。
进一步的,所述获取所述潜在事件对应的增强现实内容,包括:
根据所述潜在事件的特征信息生成所述潜在事件对应的增强现实内容;或者,
根据所述潜在事件的特征信息从预设增强现实数据库中查找所述特征信息对应的预设增强现实内容。
进一步的,在根据所述增强现实内容对所述目标帧画面进行增强现实处理之后,还包括:
根据所述用户输入的调整指令对所述增强现实内容的属性信息进行调整,所述属性信息为下述至少一个信息:位置信息、显示方向信息、显示比例信息。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (11)

1.一种增强现实的处理方法,其特征在于,包括:
获取目标帧画面关联的潜在事件;
获取所述潜在事件对应的增强现实内容;
根据所述增强现实内容对所述目标帧画面进行增强现实处理。
2.根据权利要求1所述的增强现实的处理方法,其特征在于,所述获取目标帧画面关联的潜在事件,包括:
获取目标帧画面对应的背景音数据;
根据预设事件音频特征对所述背景音数据进行音频分析,得到所述目标帧画面关联的潜在事件。
3.根据权利要求1所述的增强现实的处理方法,其特征在于,所述获取目标帧画面关联的潜在事件,包括:
对目标帧画面进行图像分析,得到所述目标帧画面包含的事件图像特征;
根据所述事件图像特征确定所述目标帧画面关联的潜在事件。
4.根据权利要求1所述的增强现实的处理方法,其特征在于,所述获取所述潜在事件对应的增强现实内容,包括:
根据所述潜在事件的特征信息生成所述潜在事件对应的增强现实内容;或者,
根据所述潜在事件的特征信息从预设增强现实数据库中查找所述特征信息对应的预设增强现实内容。
5.根据权利要求1-4中任一项所述的增强现实的处理方法,其特征在于,在根据所述增强现实内容对所述目标帧画面进行增强现实处理之后,还包括:
根据所述用户输入的调整指令对所述增强现实内容的属性信息进行调整,所述属性信息为下述至少一个信息:位置信息、显示方向信息、显示比例信息。
6.一种增强现实的处理装置,其特征在于,包括:
潜在事件获取单元,用于获取目标帧画面关联的潜在事件;
增强现实内容获取单元,用于获取所述潜在事件获取单元获取的所述潜在事件对应的增强现实内容;
增强现实处理单元,用于根据所述增强现实内容获取单元获取的所述增强现实内容对所述目标帧画面进行增强现实处理。
7.根据权利要求6所述的增强现实的处理装置,其特征在于,所述潜在事件获取单元具体用于:
获取目标帧画面对应的背景音数据;
根据预设事件音频特征对所述背景音数据进行音频分析,得到所述目标帧画面关联的潜在事件。
8.根据权利要求6所述的增强现实的处理装置,其特征在于,所述潜在事件获取单元具体用于:
对目标帧画面进行图像分析,得到所述目标帧画面包含的事件图像特征;
根据所述事件图像特征确定所述目标帧画面关联的潜在事件。
9.根据权利要求6所述的增强现实的处理装置,其特征在于,所述增强现实内容获取单元具体用于:
根据所述潜在事件获取单元获取的所述潜在事件的特征信息生成所述潜在事件对应的增强现实内容;或者,
根据所述潜在事件获取单元获取的所述潜在事件的特征信息从预设增强现实数据库中查找所述特征信息对应的预设增强现实内容。
10.根据权利要求6-9中任一项所述的增强现实的处理装置,其特征在于,还包括:
接收单元,用于接收用户输入的调整指令;
调整单元,用于根据所述接收单元接收的所述用户输入的调整指令对所述增强现实内容的属性信息进行调整,所述属性信息为下述至少一个信息:位置信息、显示方向信息、显示比例信息。
11.一种终端,其特征在于,所述终端包括权利要求6-10中任一项所述的增强现实的处理装置。
CN201610507251.8A 2016-06-28 2016-06-28 一种增强现实的处理方法、装置及终端 Active CN106127829B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610507251.8A CN106127829B (zh) 2016-06-28 2016-06-28 一种增强现实的处理方法、装置及终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610507251.8A CN106127829B (zh) 2016-06-28 2016-06-28 一种增强现实的处理方法、装置及终端

Publications (2)

Publication Number Publication Date
CN106127829A true CN106127829A (zh) 2016-11-16
CN106127829B CN106127829B (zh) 2020-06-30

Family

ID=57468387

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610507251.8A Active CN106127829B (zh) 2016-06-28 2016-06-28 一种增强现实的处理方法、装置及终端

Country Status (1)

Country Link
CN (1) CN106127829B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107135419A (zh) * 2017-06-14 2017-09-05 北京奇虎科技有限公司 一种编辑视频的方法和装置
CN107493442A (zh) * 2017-07-21 2017-12-19 北京奇虎科技有限公司 一种编辑视频的方法和装置
CN107657638A (zh) * 2017-10-30 2018-02-02 努比亚技术有限公司 一种图像处理方法、装置及计算机可读存储介质
CN109087376A (zh) * 2018-07-31 2018-12-25 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN109584377A (zh) * 2018-09-04 2019-04-05 亮风台(上海)信息科技有限公司 一种用于呈现增强现实内容的方法与设备
CN111770375A (zh) * 2020-06-05 2020-10-13 百度在线网络技术(北京)有限公司 视频处理方法、装置、电子设备及存储介质
CN111915744A (zh) * 2020-08-31 2020-11-10 深圳传音控股股份有限公司 增强现实图像的交互方法、终端和存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1794265A (zh) * 2005-12-31 2006-06-28 北京中星微电子有限公司 基于视频的面部表情识别方法及装置
CN101247482A (zh) * 2007-05-16 2008-08-20 北京思比科微电子技术有限公司 一种实现动态图像处理的方法和装置
CN101827266A (zh) * 2010-04-01 2010-09-08 公安部第三研究所 一种具有视频结构化描述功能的网络视频服务器及利用其实现视频分析描述的方法
WO2013027893A1 (ko) * 2011-08-22 2013-02-28 Kang Jun-Kyu 통신단말장치의 감정 컨텐츠 서비스 장치 및 방법, 이를 위한 감정 인지 장치 및 방법, 이를 이용한 감정 컨텐츠를 생성하고 정합하는 장치 및 방법
CN103460238A (zh) * 2011-04-04 2013-12-18 微软公司 从照片中进行事件确定
CN103697900A (zh) * 2013-12-10 2014-04-02 郭海锋 一种情感车载机器人通过增强现实进行危险预警的方法
CN103853326A (zh) * 2012-12-06 2014-06-11 国际商业机器公司 动态增强现实媒体创建
CN104780338A (zh) * 2015-04-16 2015-07-15 美国掌赢信息科技有限公司 一种即时视频中的表情特效动画加载方法和电子设备

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1794265A (zh) * 2005-12-31 2006-06-28 北京中星微电子有限公司 基于视频的面部表情识别方法及装置
CN101247482A (zh) * 2007-05-16 2008-08-20 北京思比科微电子技术有限公司 一种实现动态图像处理的方法和装置
CN101827266A (zh) * 2010-04-01 2010-09-08 公安部第三研究所 一种具有视频结构化描述功能的网络视频服务器及利用其实现视频分析描述的方法
CN103460238A (zh) * 2011-04-04 2013-12-18 微软公司 从照片中进行事件确定
WO2013027893A1 (ko) * 2011-08-22 2013-02-28 Kang Jun-Kyu 통신단말장치의 감정 컨텐츠 서비스 장치 및 방법, 이를 위한 감정 인지 장치 및 방법, 이를 이용한 감정 컨텐츠를 생성하고 정합하는 장치 및 방법
CN103853326A (zh) * 2012-12-06 2014-06-11 国际商业机器公司 动态增强现实媒体创建
CN103697900A (zh) * 2013-12-10 2014-04-02 郭海锋 一种情感车载机器人通过增强现实进行危险预警的方法
CN104780338A (zh) * 2015-04-16 2015-07-15 美国掌赢信息科技有限公司 一种即时视频中的表情特效动画加载方法和电子设备

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107135419A (zh) * 2017-06-14 2017-09-05 北京奇虎科技有限公司 一种编辑视频的方法和装置
CN107493442A (zh) * 2017-07-21 2017-12-19 北京奇虎科技有限公司 一种编辑视频的方法和装置
CN107657638A (zh) * 2017-10-30 2018-02-02 努比亚技术有限公司 一种图像处理方法、装置及计算机可读存储介质
CN109087376A (zh) * 2018-07-31 2018-12-25 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN109584377A (zh) * 2018-09-04 2019-04-05 亮风台(上海)信息科技有限公司 一种用于呈现增强现实内容的方法与设备
CN109584377B (zh) * 2018-09-04 2023-08-29 亮风台(上海)信息科技有限公司 一种用于呈现增强现实内容的方法与设备
CN111770375A (zh) * 2020-06-05 2020-10-13 百度在线网络技术(北京)有限公司 视频处理方法、装置、电子设备及存储介质
CN111770375B (zh) * 2020-06-05 2022-08-23 百度在线网络技术(北京)有限公司 视频处理方法、装置、电子设备及存储介质
US11800042B2 (en) 2020-06-05 2023-10-24 Baidu Online Network Technology (Beijing) Co., Ltd. Video processing method, electronic device and storage medium thereof
CN111915744A (zh) * 2020-08-31 2020-11-10 深圳传音控股股份有限公司 增强现实图像的交互方法、终端和存储介质

Also Published As

Publication number Publication date
CN106127829B (zh) 2020-06-30

Similar Documents

Publication Publication Date Title
CN106778585B (zh) 一种人脸关键点跟踪方法和装置
CN106127829A (zh) 一种增强现实的处理方法、装置及终端
CN105487649B (zh) 一种提示方法及移动终端
CN103871051B (zh) 图像处理方法、装置和电子设备
CN109918975A (zh) 一种增强现实的处理方法、对象识别的方法及终端
CN108304758A (zh) 人脸特征点跟踪方法及装置
CN104143097B (zh) 分类函数获取方法、人脸年龄识别方法、装置和设备
CN104967790B (zh) 照片拍摄方法、装置及移动终端
CN103813127B (zh) 一种视频通话方法、终端及系统
CN104717125B (zh) 图形码保存方法和装置
CN103714161B (zh) 图像缩略图的生成方法、装置和终端
CN106204423A (zh) 一种基于增强现实的图片调整方法、装置及终端
CN107809526A (zh) 终端应用程序分类方法、移动终端及计算机可读存储介质
CN109426783A (zh) 基于增强现实的手势识别方法及系统
CN106203254A (zh) 一种调整拍照方向的方法及装置
CN105606117A (zh) 导航提示方法及装置
CN109067981A (zh) 分屏应用切换方法、装置、存储介质和电子设备
CN109213885A (zh) 基于增强现实的汽车展示方法及系统
CN108874352A (zh) 一种信息显示方法及移动终端
CN109189300A (zh) 一种视图循环展示方法和装置
CN107657583A (zh) 一种截图方法、终端及计算机可读存储介质
CN107943417A (zh) 图像处理方法、终端、计算机存储介质及计算机程序
CN110209245A (zh) 人脸识别方法及相关产品
CN104820546B (zh) 功能信息展示方法和装置
CN106203459A (zh) 图片处理方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant after: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS CORP., Ltd.

Address before: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant before: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS CORP., Ltd.

GR01 Patent grant
GR01 Patent grant