CN110865708B - 虚拟内容载体的交互方法、介质、装置和计算设备 - Google Patents

虚拟内容载体的交互方法、介质、装置和计算设备 Download PDF

Info

Publication number
CN110865708B
CN110865708B CN201911114942.1A CN201911114942A CN110865708B CN 110865708 B CN110865708 B CN 110865708B CN 201911114942 A CN201911114942 A CN 201911114942A CN 110865708 B CN110865708 B CN 110865708B
Authority
CN
China
Prior art keywords
content
carrier
scene
virtual content
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911114942.1A
Other languages
English (en)
Other versions
CN110865708A (zh
Inventor
张东旭
刘宇航
杨静
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Netease Cloud Music Technology Co Ltd
Original Assignee
Hangzhou Netease Cloud Music Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Netease Cloud Music Technology Co Ltd filed Critical Hangzhou Netease Cloud Music Technology Co Ltd
Priority to CN201911114942.1A priority Critical patent/CN110865708B/zh
Publication of CN110865708A publication Critical patent/CN110865708A/zh
Application granted granted Critical
Publication of CN110865708B publication Critical patent/CN110865708B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明的实施方式提供了一种虚拟内容载体的交互方法、介质、虚拟内容载体的交互装置和计算设备。该方法包括:响应于场景显示指令,在所述交互界面上实时显示现实场景的场景图像;获取与所述现实场景相关联的携带至少一种媒体内容的虚拟内容载体;将所述虚拟内容载体叠加显示在所述现实场景的场景图像上;响应于内容展示指令,在所述交互界面上显示与所述虚拟内容载体相关的内容展示页面。该方法通过虚拟内容载体的形式将多种媒体形式的用户自主创作内容融合在增强现实场景中,提升了交互方式和内容类型的可扩展性。

Description

虚拟内容载体的交互方法、介质、装置和计算设备
技术领域
本发明的实施方式涉及通信及计算机技术领域,更具体地,本发明的实施方式涉及虚拟内容载体的交互方法、介质、虚拟内容载体的交互装置和计算设备。
背景技术
本部分旨在为权利要求书中陈述的本发明的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。
随着虚拟现实、增强现实等技术的发展,用户可以利用计算机设备实现虚拟环境与现实环境以及虚拟物体与现实物体的交互。但是,这种交互方式受限于定制模型或定制内容,交互逻辑也停留在用户与定制内容的层面,整体交互方式较为单一,交互内容的扩展性较差。
发明内容
本发明的目的在于提供一种虚拟内容载体的交互方法、介质、虚拟内容载体的交互装置和计算设备,进而至少在一定程度上克服相关技术中存在的交互方式单一、交互内容扩展性差等技术问题。
根据本发明的第一方面,提供一种虚拟内容载体的交互方法,应用于具有交互界面的终端设备,该方法包括:
响应于场景显示指令,在所述交互界面上实时显示现实场景的场景图像;
获取与所述现实场景相关联的携带至少一种媒体内容的虚拟内容载体;
将所述虚拟内容载体叠加显示在所述现实场景的场景图像上;
响应于内容展示指令,在所述交互界面上显示与所述虚拟内容载体相关的内容展示页面。
在本发明的一些示例性实施方式中,基于以上技术方案,所述响应于场景显示指令,在所述交互界面上实时显示现实场景的场景图像,包括:
识别编码图像以得到所述编码图像中的编码信息;
根据所述编码信息触发场景显示指令;
根据所述场景显示指令在所述交互界面上实时显示现实场景的场景图像。
在本发明的一些示例性实施方式中,基于以上技术方案,所述获取与所述现实场景相关联的携带至少一种媒体内容的虚拟内容载体,包括:
根据所述编码信息确定所述现实场景的场景标识信息;
获取与所述场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
在本发明的一些示例性实施方式中,基于以上技术方案,所述获取与所述现实场景相关联的携带至少一种媒体内容的虚拟内容载体,包括:
对所述现实场景的场景图像进行特征提取以得到所述现实场景的图像特征;
根据所述图像特征确定所述现实场景的场景标识信息;
获取与所述场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
在本发明的一些示例性实施方式中,基于以上技术方案,所述获取与所述现实场景相关联的携带至少一种媒体内容的虚拟内容载体,包括:
获取所述终端设备的终端位置信息;
根据所述终端位置信息确定所述现实场景的场景标识信息;
获取与所述场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
在本发明的一些示例性实施方式中,基于以上技术方案,所述将所述虚拟内容载体叠加显示在所述现实场景的场景图像上,包括:
确定对应于所述现实场景的真实场景对象;
获取所述真实场景对象在所述现实场景的场景图像中的对象位置信息;
根据所述对象位置信息确定所述虚拟内容载体的载体位置信息;
根据所述载体位置信息将所述虚拟内容载体叠加显示在所述现实场景的场景图像上。
在本发明的一些示例性实施方式中,基于以上技术方案,所述将所述虚拟内容载体叠加显示在所述现实场景的场景图像上,包括:
获取所述终端设备的终端位置信息;
根据所述终端位置信息确定所述虚拟内容载体的载体位置信息;
根据所述载体位置信息将所述虚拟内容载体叠加显示在所述现实场景的场景图像上。
在本发明的一些示例性实施方式中,基于以上技术方案,所述在所述交互界面上显示与所述虚拟内容载体相关的内容展示页面,包括:
确定与所述内容展示指令相对应的目标虚拟内容载体;
获取所述目标虚拟内容载体中携带的目标媒体内容;
在所述交互界面上显示用于展示所述目标媒体内容的内容展示页面。
在本发明的一些示例性实施方式中,基于以上技术方案,所述在所述交互界面上显示用于展示所述目标媒体内容的内容展示页面,包括:
以叠加显示了所述虚拟内容载体的所述现实场景的场景图像作为显示背景,显示用于展示所述目标媒体内容的内容展示页面。
在本发明的一些示例性实施方式中,基于以上技术方案,所述目标媒体内容包括文本内容、图像内容、音频内容和视频内容中的一种或者多种。
在本发明的一些示例性实施方式中,基于以上技术方案,所述方法还包括:
响应作用于所述内容展示页面的内容交互指令,在所述交互界面上显示与所述内容展示页面相对应的内容交互页面。
在本发明的一些示例性实施方式中,基于以上技术方案,所述在所述交互界面上显示与所述内容展示页面相对应的内容交互页面,包括:
当所述内容交互指令为图像采集指令时,在所述交互界面上显示包括所述场景图像以及所述目标媒体内容的图像采集页面;
当所述内容交互指令为内容评论指令时,在所述交互界面上显示包括历史评论记录和评论编辑窗口的内容评论页面;
当所述内容交互指令为内容转发指令时,在所述交互界面上显示包括一个或者多个内容转发渠道的内容转发页面;
当所述内容交互指令为信息展示指令时,获取与所述目标虚拟内容载体相对应的目标对象信息,并在所述交互界面上显示包括所述目标对象信息以及对象交互控件的信息展示页面。
在本发明的一些示例性实施方式中,基于以上技术方案,所述虚拟内容载体为多个,该多个虚拟内容载体之间的排列方式包括无覆盖排列、部分覆盖排列和全部覆盖排列中的至少一种;所述方法还包括:
在通过所述交互界面接收到针对至少一个虚拟内容载体的移动指令时,移动所述至少一个虚拟内容载体以改变所述多个虚拟内容载体之间的排列方式。
在本发明的一些示例性实施方式中,基于以上技术方案,所述方法还包括:
响应于载体创建指令,在所述交互界面上显示包括多个内容填充区域的载体创建页面;
将一种或者多种选定媒体内容填充至所述内容填充区域,以得到携带所述选定媒体内容的待定虚拟内容载体;
确定载体创建位置,并根据所述载体创建位置建立所述待定虚拟内容载体与所述现实场景的关联关系。
根据本发明的第二方面,提供一种介质,其上存储有程序,该程序被处理器执行时实现如以上技术方案中任一项所述的方法。
根据本发明的第三方面,提供一种虚拟内容载体的交互装置,应用于具有交互界面的终端设备,该装置包括:
图像显示模块,被配置为响应于场景显示指令,在所述交互界面上实时显示现实场景的场景图像;
载体获取模块,被配置为获取与所述现实场景相关联的携带至少一种媒体内容的虚拟内容载体;
载体显示模块,被配置为将所述虚拟内容载体叠加显示在所述现实场景的场景图像上;
内容展示模块,被配置为响应于内容展示指令,在所述交互界面上显示与所述虚拟内容载体相关的内容展示页面。
在本发明的一些示例性实施方式中,基于以上技术方案,所述图像显示模块包括:
编码识别单元,被配置为识别编码图像以得到所述编码图像中的编码信息;
指令触发单元,被配置为根据所述编码信息触发场景显示指令;
图像显示单元,被配置为根据所述场景显示指令在所述交互界面上实时显示现实场景的场景图像。
在本发明的一些示例性实施方式中,基于以上技术方案,所述载体获取模块包括:
第一标识确定单元,被配置为根据所述编码信息确定所述现实场景的场景标识信息;
第一载体获取单元,被配置为获取与所述场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
在本发明的一些示例性实施方式中,基于以上技术方案,所述载体获取模块包括:
特征提取单元,被配置为对所述现实场景的场景图像进行特征提取以得到所述现实场景的图像特征;
第二标识确定单元,被配置为根据所述图像特征确定所述现实场景的场景标识信息;
第二载体获取单元,被配置为获取与所述场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
在本发明的一些示例性实施方式中,基于以上技术方案,所述载体获取模块包括:
第一终端位置获取单元,被配置为获取所述终端设备的终端位置信息;
第三标识确定单元,被配置为根据所述终端位置信息确定所述现实场景的场景标识信息;
第三载体获取单元,被配置为获取与所述场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
在本发明的一些示例性实施方式中,基于以上技术方案,所述载体显示模块包括:
对象确定单元,被配置为确定对应于所述现实场景的真实场景对象;
对象位置获取单元,被配置为获取所述真实场景对象在所述现实场景的场景图像中的对象位置信息;
第一载体位置确定单元,被配置为根据所述对象位置信息确定所述虚拟内容载体的载体位置信息;
第一载体显示单元,被配置为根据所述载体位置信息将所述虚拟内容载体叠加显示在所述现实场景的场景图像上。
在本发明的一些示例性实施方式中,基于以上技术方案,所述载体显示模块包括:
第二终端位置获取单元,被配置为获取所述终端设备的终端位置信息;
第二载体位置确定单元,被配置为根据所述终端位置信息确定所述虚拟内容载体的载体位置信息;
第二载体显示单元,被配置为根据所述载体位置信息将所述虚拟内容载体叠加显示在所述现实场景的场景图像上。
在本发明的一些示例性实施方式中,基于以上技术方案,所述内容展示模块包括:
目标载体确定单元,被配置为确定与所述内容展示指令相对应的目标虚拟内容载体;
目标内容获取单元,被配置为获取所述目标虚拟内容载体中携带的目标媒体内容;
目标内容展示单元,被配置为在所述交互界面上显示用于展示所述目标媒体内容的内容展示页面。
在本发明的一些示例性实施方式中,基于以上技术方案,所述目标内容展示单元被配置为以叠加显示了所述虚拟内容载体的所述现实场景的场景图像作为显示背景,显示用于展示所述目标媒体内容的内容展示页面。
在本发明的一些示例性实施方式中,基于以上技术方案,所述目标媒体内容包括文本内容、图像内容、音频内容和视频内容中的一种或者多种。
在本发明的一些示例性实施方式中,基于以上技术方案,所述装置还包括:
内容交互模块,被配置为响应作用于所述内容展示页面的内容交互指令,在所述交互界面上显示与所述内容展示页面相对应的内容交互页面。
在本发明的一些示例性实施方式中,基于以上技术方案,所述内容交互模块包括:
图像采集单元,被配置为当所述内容交互指令为图像采集指令时,在所述交互界面上显示包括所述场景图像以及所述目标媒体内容的图像采集页面;
内容评论单元,被配置为当所述内容交互指令为内容评论指令时,在所述交互界面上显示包括历史评论记录和评论编辑窗口的内容评论页面;
内容转发单元,被配置为当所述内容交互指令为内容转发指令时,在所述交互界面上显示包括一个或者多个内容转发渠道的内容转发页面;
信息展示单元,被配置为当所述内容交互指令为信息展示指令时,获取与所述目标虚拟内容载体相对应的目标对象信息,并在所述交互界面上显示包括所述目标对象信息以及对象交互控件的信息展示页面。
在本发明的一些示例性实施方式中,基于以上技术方案,所述虚拟内容载体为多个,该多个虚拟内容载体之间的排列方式包括无覆盖排列、部分覆盖排列和全部覆盖排列中的至少一种;所述装置还包括:
载体移动模块,被配置为在通过所述交互界面接收到针对至少一个虚拟内容载体的移动指令时,移动所述至少一个虚拟内容载体以改变所述多个虚拟内容载体之间的排列方式。
在本发明的一些示例性实施方式中,基于以上技术方案,所述装置还包括:
载体创建模块,被配置为响应于载体创建指令,在所述交互界面上显示包括多个内容填充区域的载体创建页面;
内容填充模块,被配置为将一种或者多种选定媒体内容填充至所述内容填充区域,以得到携带所述选定媒体内容的待定虚拟内容载体;
载体关联模块,被配置为确定载体创建位置,并根据所述载体创建位置建立所述待定虚拟内容载体与所述现实场景的关联关系。
根据本发明的第四方面,提供一种计算设备,包括:处理器和存储器,所述存储器存储有可执行指令,所述处理器用于调用所述存储器存储的可执行指令执行如以上技术方案中任一项所述的方法。
在本发明提供的技术方案中,通过将携带媒体内容的虚拟内容载体叠加显示在现实场景的场景图像中,可以在现实场景中显示虚拟对象的同时提供更丰富的内容交互方式,利用虚拟内容载体的形式将多种媒体形式的用户自主创作内容融合在增强现实场景中,提升了交互方式和内容类型的可扩展性。
附图说明
通过参考附图阅读下文的详细描述,本发明示例性实施方式的上述以及其他目的、特征和优点将变得易于理解。在附图中,以示例性而非限制性的方式示出了本发明的若干实施方式,其中:
图1示出了应用本发明示例性实施方式的系统架构示意图。
图2A示意性地示出了一个带有AR码的现实场景。
图2B示意性地示出了虚拟留言墙AR场景的示意图。
图3示意性地示出了本发明一些示例性实施方式中虚拟内容载体的交互方法的步骤流程图。
图4示意性地示出了本发明一些示例性实施方式中显示现实场景的场景图像的步骤流程图。
图5示意性地示出了本发明一些示例性实施方式中基于编码信息的关联形式获取虚拟内容载体的方法步骤流程图。
图6示意性地示出了本发明一些示例性实施方式中基于图像特征的关联形式获取虚拟内容载体的方法步骤流程图。
图7示意性地示出了本发明一些示例性实施方式中基于终端位置的关联形式获取虚拟内容载体的方法步骤流程图。
图8示意性地示出了本发明一些示例性实施方式中基于固定位置的方式叠加显示虚拟内容载体的步骤流程图。
图9示意性地示出了本发明一些示例性实施方式中基于跟随环绕的方式叠加显示虚拟内容载体的步骤流程图。
图10示意性地示出了本发明一些示例性实施方式中显示内容展示页面的步骤流程图。
图11示意性地示出了基于浮层页面的内容展示效果示意图。
图12示意性地示出了本发明一些示例性实施方式中显示内容交互页面的步骤流程图。
图13示意性地示出了一种图像采集页面的示意图。
图14示意性地示出了一种内容评论页面的示意图。
图15示意性地示出了一种信息展示页面的示意图。
图16示意性地示出了本发明一些示例性实施方式中创建虚拟内容载体的步骤流程图。
图17示意性地示出了一种载体创建页面的示意图。
图18示意性地示出了待定虚拟内容载体的示意图。
图19示意性地示出了在现实场景的场景图像上选取创建位置的界面示意图。
图20示意性地示出了创建虚拟内容载体的效果示意图。
图21示意性地示出了本发明一些示例性实施方式中的虚拟内容载体的交互装置的结构框图。
在附图中,相同或对应的标号表示相同或对应的部分。
具体实施方式
下面将参考若干示例性实施方式来描述本发明的原理和精神。应当理解,给出这些实施方式仅仅是为了使本领域技术人员能够更好地理解进而实现本发明,而并非以任何方式限制本发明的范围。相反,提供这些实施方式是为了使本发明更加透彻和完整,并且能够将本发明的范围完整地传达给本领域的技术人员。
本领域技术人员知道,本发明的实施方式可以实现为一种系统、装置、设备、方法或计算机程序产品。因此,本发明可以具体实现为以下形式,即:完全的硬件、完全的软件(包括固件、驻留软件、微代码等),或者硬件和软件结合的形式。
本发明中涉及的技术术语解释如下:
APP客户端:基于移动终端操作系统的应用,例如音乐APP。用户打开APP客户端中某个界面,客户端发送请求到产品服务器,服务器返回数据,并呈现给用户最终界面。用户在APP客户端的界面上进行输入操作,客户端发送数据到产品服务器,产品服务器存储数据。
扫一扫:是指通过移动终端上安装的APP客户端获取特定code码(例如二维码/AR码)图片中的内容和信息的形式,例如支付类APP的扫描支付码入口,社交类APP的扫描二维码入口。
增强现实(Augmented Reality,简称AR):是一种实时地计算摄影机影像的位置及角度并加上相应图像的技术,包含了多媒体、三维建模、实时视频显示及控制、多传感器溶合、实时跟踪及注册、场景融合等新技术与新手段,它将计算机生成的虚拟物体或关于真实物体的非几何信息叠加到真实世界的场景之上,实现了对真实世界的增强。
此外,本发明中涉及的相关元素数量仅用于示例而非限制,以及相关元素的命名都仅用于区分,而不具有任何限制含义。
下面参考本发明的若干代表性实施方式,详细阐释本发明的原理和精神。
发明概述
本发明人发现,AR技术主要应用于定制模型与现实场景的基础显示层面,交互方式主要分为三种:
1.现实世界中的点位选取来进行交互,例如AR贺卡和毕业相册。
2.将空间中的一个或多个事物的特定姿势或者状态加以判断,这些姿势都对应着不同的命令。使用者可以任意改变和使用命令来进行交互,比如用不同的手势表示不同的指令。
3.使用特制工具进行交互。比如谷歌地球利用类似于鼠标一样的东西来进行系列操作,从而满足用户对于AR互动的要求。
以上交互方式仅能进行用户对定制动画模型及动画模型动作的阅读,交互逻辑停留在用户与定制内容的层面,整体交互方式较为单一。
针对以上相关技术存在的问题,本发明提供了一种虚拟内容载体的交互方法,该方法可以将AR模型作为用户生成内容(User Generated Content,UGC)的虚拟内容载体,为用户提供可以自由创作和阅读查看的AR社交社区功能,在融入用户内容创作、用户社交等模式的基础上极大地扩展了AR技术的应用场景。
在介绍了本发明的基本原理之后,下面具体介绍本发明的各种非限制性实施方式。
应用场景总览
需要注意的是,下述应用场景仅是为了便于理解本发明的精神和原理而示出,本发明的实施方式在此方面不受任何限制。相反,本发明的实施方式可以应用于适用的任何场景。
图1示出了应用本发明示例性实施方式的系统架构示意图。如图1所示,系统架构100可以包括客户端110、网络120和服务端130。客户端110可以包括智能手机、平板电脑、笔记本电脑、台式电脑等各种终端设备。服务端130可以包括网络服务器、应用服务器、数据库服务器等各种服务器设备,服务端130可以为客户端110提供网络资源和数据服务。网络120可以是能够在客户端110和服务端130之间提供通信链路的各种连接类型的通信介质,例如可以是有线通信链路或者无线通信链路等等。
根据实现需要,本发明示例性实施方式的系统架构可以具有任意数目的客户端、网络和服务端。例如,服务端130可以是由多个服务器设备组成的服务器群组。本发明示例性实施方式提供的虚拟内容载体的交互方法主要可以应用于客户端110。
举例而言,客户端110上可以安装实现虚拟内容载体交互的APP应用程序,用户利用该APP应用程序的“扫一扫”功能扫描指定的二维码或者AR码后进入AR场景。服务端130根据扫码结果获取基于AR模型的虚拟内容载体,并将虚拟内容载体与现实中的真实环境和真实物体叠加显示在客户端110的交互界面上。
图2A示意性地示出了一个带有AR码的现实场景。该现实场景整体为一墙面210,墙面210是现实世界中真实存在的建筑立面,例如可以是粉刷墙壁、玻璃幕墙、栏杆围墙等等。墙面210上提供有AR码220,当用户利用手机或者其他终端设备扫描AR码220之后,可以进入图2B所示的虚拟留言墙AR场景。在虚拟留言墙AR场景中,用户会看到墙面210上张贴着的其他用户留下(发布)的作为虚拟内容载体的留言贴230,留言贴230用于模拟现实中可记录文字的便利贴、便签纸或者小纸条。用户可以通过移动手机靠近墙面210以便近距离观察每个留言贴230。当一个留言贴被遮挡时,用户可点击拖动上层留言贴。另外,用户也可以点击取下留言贴放大观看。同时,用户还可以编辑发布属于自己的留言贴,以供其他用户查看和互动。
示例性方法
下面结合上述的应用场景,参考图3至图20来描述根据本发明示例性实施方式的虚拟内容载体的交互方法。
图3示意性地示出了本发明一些示例性实施方式中虚拟内容载体的交互方法的步骤流程图,该方法可以应用于智能手机、平板电脑等各种具有交互界面的终端设备,另外也可以应用于智能眼镜等智能穿戴设备。如图3所示,该方法主要可以包括以下步骤:
步骤S310.响应于场景显示指令,在交互界面上实时显示现实场景的场景图像。
用户利用终端设备的交互界面进行主动操作可以触发场景显示指令,例如本步骤可以实时检测用户的触控操作,当该触控操作为指定的操作类型或者触发了指定的虚拟控件时便可以确认触发场景显示指令。另外,终端设备也可以通过采集监测数据判断是否满足指定的触发条件,例如可以实时监测终端设备的位置信息,当终端设备到达指定地点或者处于指定地点范围内时可以自动触发场景显示指令。响应于场景显示指令,可以利用终端设备的图像采集功能实时获取并显示现实场景的场景图像。
步骤S320.获取与现实场景相关联的携带至少一种媒体内容的虚拟内容载体。
虚拟内容载体是仿照现实内容载体的特征而制作的虚拟模型,例如可以是具有留言贴、便签纸、光盘、磁带、录像带等外观特征而且可以作为内容载体的各种虚拟模型。虚拟内容载体上可以单独携带一种或者同时携带多种不同类型的媒体内容,媒体内容的类型例如可以包括文本、图像、音频、视频等等,其中音频可以是用户自行录制上传的语音,也可以是通过网络加载的音乐文件或者音乐链接。
步骤S330.将虚拟内容载体叠加显示在现实场景的场景图像上。
由步骤S320获取到的与现实场景具有关联关系的虚拟内容载体可以叠加显示在现实场景的场景图像上,向用户呈现出虚拟内容载体是真实存在于当前现实场景中的真实物体的显示效果。与当前的现实场景具有关联关系的虚拟内容载体可以是一个或者多个,当步骤S320获取到多个虚拟内容载体时,本步骤可以将全部的或者部分的虚拟内容载体叠加显示在现实场景的场景图像上,具体显示数量可以与指定的显示模式或者图像采集范围的大小等信息相关。
步骤S340.响应于内容展示指令,在交互界面上显示与虚拟内容载体相关的内容展示页面。
当接收到内容展示指令时,在终端设备的交互界面上将显示与虚拟内容载体相关的内容展示页面。例如,当用户点击交互界面上显示的某一个虚拟内容载体时,便可以触发内容展示指令,相应的内容展示页面可以展示该虚拟内容载体所携带的媒体内容,例如可以展示文本或者图像,也可以播放语音、音乐或者视频。
在本发明实施例提供的虚拟内容载体的交互方法中,通过将携带媒体内容的虚拟内容载体叠加显示在现实场景的场景图像中,可以在现实场景中显示虚拟对象的同时提供更丰富的内容交互方式,利用虚拟内容载体的形式将多种媒体形式的用户自主创作内容融合在增强现实场景中,提升了交互方式和内容类型的可扩展性。
在一些可选的实施方式中,用户可以通过扫描编码图像的方式进入增强现实场景并开始采集现实场景的场景图像。图4示意性地示出了本发明一些示例性实施方式中显示现实场景的场景图像的步骤流程图。如图4所示,在以上实施例的基础上,步骤S310.响应于场景显示指令,在交互界面上实时显示现实场景的场景图像,可以包括以下步骤:
步骤S410.识别编码图像以得到编码图像中的编码信息。
编码图像是携带有特定编码信息的图像,可以表现为一维条码、二维码、AR码等多种形式。利用终端设备上各种APP客户端提供的“扫一扫”功能,可以扫描并识别编码图像。如果识别成功,便可以解析得到编码图像中所携带的编码信息。
步骤S420.根据编码信息触发场景显示指令。
在步骤S410成功识别编码图像后,根据解析得到的编码信息可以触发相应的场景显示指令,从而进入增强现实场景,开始对现实场景进行图像采集。
步骤S430.根据场景显示指令在交互界面上实时显示现实场景的场景图像。
通过图像采集获取到的现实场景的场景图像可以实时地显示在终端设备的交互界面上,该场景图像可以看做是虚拟内容载体的显示平台,同时也是用户与虚拟内容载体进行交互的基础环境。
待显示的虚拟内容载体可以通过多种形式与现实场景预先建立关联关系,根据该关联关系即可以针对实时显示的现实场景的场景图像获取到与之关联的虚拟内容载体。
图5至图7分别提供了三种基于不同关联形式获取虚拟内容载体的方法步骤流程图。
如图5所示,在本发明的一些示例性实施方式中,步骤S320.获取与现实场景相关联的携带至少一种媒体内容的虚拟内容载体,可以包括以下步骤:
步骤S510.根据编码信息确定现实场景的场景标识信息。
根据步骤S410中识别解析得到的编码信息可以首先确定当前现实场景的场景标识信息,场景标识信息是表征当前现实场景的唯一性标识,用以区分当前采集图像的现实场景与其他的现实场景。例如,以多个真实的墙面作为现实场景,每个墙面可以具有不同的场景标识信息,用以相互进行区分。
步骤S520.获取与场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
场景标识信息与各个不同的虚拟内容载体之间可以预先建立关联关系,例如可以形成关系映射表。基于确定的场景标识信息,可以在终端设备的本地数据库或者通过网络链接从服务器获取与该场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
如图6所示,在本发明的另一些示例性实施方式中,步骤S320.获取与现实场景相关联的携带至少一种媒体内容的虚拟内容载体,可以包括以下步骤:
步骤S610.对现实场景的场景图像进行特征提取以得到现实场景的图像特征。
步骤S620.根据图像特征确定现实场景的场景标识信息。
步骤S630.获取与场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
在本发明实施例中,可以利用预先配置的特征提取算法对现实场景的场景图像进行特征提取,从而得到当前现实场景的图像特征。例如,在现实场景中可以包括具有标识性的文字或者图标等内容,如地点名称、商标、LOGO等等,而这些内容即可作为提取图像特征的基础。再根据提取得到的图像特征确定当前现实场景的场景标识信息,然后即可查询预先建立的关系映射表获取与该场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
如图7所示,在本发明的另一些示例性实施方式中,步骤S320.获取与现实场景相关联的携带至少一种媒体内容的虚拟内容载体,可以包括以下步骤:
步骤S710.获取终端设备的终端位置信息。
步骤S720.根据终端位置信息确定现实场景的场景标识信息。
步骤S730.获取与场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
在本发明实施例中,可以借助现实场景的位置信息对其进行标识,从而建立现实场景与虚拟内容载体的关联关系。通过获取终端设备的终端位置信息确定当前现实场景的地理位置,进而确定当前现实场景的场景标识信息。再查询预先建立的关系映射表即可获取与该场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
在获取到虚拟内容载体后,可以通过增强现实技术将虚拟内容载体与现实场景同时显示在终端设备的交互界面上。图8示意性地示出了本发明一些示例性实施方式中基于固定位置的方式叠加显示虚拟内容载体的步骤流程图。如图8所示,在以上各实施例的基础上,步骤S330.将虚拟内容载体叠加显示在现实场景的场景图像上,可以包括以下步骤:
步骤S810.确定对应于现实场景的真实场景对象。
真实场景对象是现实场景中真实存在的实体对象,例如当前现实场景为一咖啡馆或者餐厅等室内场景,那么本步骤确定的真实场景对象可以是该室内场景对应的墙面、门窗、橱柜、桌椅等各种实体对象。
步骤S820.获取真实场景对象在现实场景的场景图像中的对象位置信息。
真实场景对象在现实场景中一般具有相对固定的位置,在由终端设备实时获取到的现实场景的场景图像中,本步骤可以获取真实场景对象的对象位置信息。例如,真实场景对象为墙面时,该墙面在现实场景的场景图像中具有相对固定的显示位置。当用户移动终端设备或者改变图像采集角度时,也不会改变真实场景对象与现实场景的场景图像中其他内容的位置关系。
步骤S830.根据对象位置信息确定虚拟内容载体的载体位置信息。
以步骤S810中确定的真实场景对象作为定位参考对象,根据步骤S820获取到的对象位置信息可以确定虚拟内容载体的载体位置信息。基于对象位置信息和载体位置信息可以确定虚拟内容载体与真实场景对象的位置关系。
步骤S840.根据载体位置信息将虚拟内容载体叠加显示在现实场景的场景图像上。
在现实场景的场景图像中显示的真实场景对象可以作为显示虚拟内容载体的参照物,基于步骤S830确定的虚拟内容载体的载体位置信息,可以将相应的虚拟内容载体叠加显示在现实场景的场景图像上。例如,虚拟内容载体可以是模仿在墙面的指定位置上张贴的虚拟留言贴。当用户移动位置时,虚拟留言贴在墙面上的张贴位置并不会发生变化,因此用户可以通过改变终端设备的位置而从不同距离、不同角度观察在场景图像上叠加显示的虚拟内容载体。
本发明实施例提供的基于固定位置的虚拟内容载体的显示方法可以加强虚拟内容载体与真实场景对象的联系,提高虚拟内容载体的在现实场景中的实物感和透视感。
图9示意性地示出了本发明一些示例性实施方式中基于跟随环绕的方式叠加显示虚拟内容载体的步骤流程图。如图9所示,在以上各实施例的基础上,步骤S330.将虚拟内容载体叠加显示在现实场景的场景图像上,可以包括以下步骤:
步骤S910.获取终端设备的终端位置信息。
用户在使用终端设备时,自身位置可能会发生变化,本步骤可以实时地监测并获取终端设备的终端位置信息。
步骤S920.根据终端位置信息确定虚拟内容载体的载体位置信息。
以终端设备作为定位参考对象,根据步骤S910获取到的终端位置信息可以确定虚拟内容载体的载体位置信息。
步骤S930.根据载体位置信息将虚拟内容载体叠加显示在现实场景的场景图像上。
将终端设备自身作为参照物,基于步骤S920确定的虚拟内容载体的载体位置信息,可以将相应的虚拟内容载体叠加显示在现实场景的场景图像上。例如,虚拟内容载体可以是模仿悬挂或者漂浮在空中的具有各种不同外形的挂件或者纸条。当用户移动位置时,步骤S910获取到的终端位置信息将发生改变,相应确定的载体位置信息也将同步变化,因此,虚拟内容载体将随着用户的移动而相对现实场景移动。
在本发明实施例提供的跟随环绕式的虚拟内容载体的显示方法不受空间位置的限制,可以为用户带来跟随式的体验,交互更加方便,而且跟踪用户位置的方式具有更稳定的显示效果。
在未触发内容展示指令时,在交互界面上显示的虚拟内容载体能够向用户展示载体的外形以及载体表面的信息。当用户触发内容展示指令时,可以在交互界面上显示与虚拟内容载体相关的内容展示页面,以向用户展示虚拟内容载体所携带的具体的媒体内容以及其他相关信息。
图10示意性地示出了本发明一些示例性实施方式中显示内容展示页面的步骤流程图。如图10所示,在以上各实施例的基础上,步骤S340中的在交互界面上显示与虚拟内容载体相关的内容展示页面,可以包括以下步骤:
步骤S1010.确定与内容展示指令相对应的目标虚拟内容载体。
在现实场景的场景图像上可能叠加显示有一个或者多个不同的虚拟内容载体。响应于内容展示指令,本步骤首先可以确定与之相对应的目标虚拟内容载体,例如用户可以点击场景图像中叠加显示的某一个虚拟内容载体,那么被点击的虚拟内容载体即作为目标虚拟内容载体。
步骤S1020.获取目标虚拟内容载体中携带的目标媒体内容。
在确定目标虚拟内容载体后,本步骤可以获取该目标虚拟内容载体中携带的目标媒体内容。目标媒体内容具体可以包括文本内容、图像内容、音频内容和视频内容中的一种或者多种。
步骤S1030.在交互界面上显示用于展示目标媒体内容的内容展示页面。
由步骤S1020获取到的目标媒体内容将以内容展示页面的形式显示在交互界面上。内容展示页面可以占据交互界面的全部区域或者部分区域。在一些可选的实施方式中,内容展示页面可以是一独立于场景图像的浮层页面。在这种显示方式下,可以将叠加显示了虚拟内容载体的现实场景的场景图像作为显示背景,显示用于展示目标媒体内容的内容展示页面。
以叠加显示在墙面上的虚拟留言贴为例,当用户点击显示在墙面上的某个虚拟留言贴时,该虚拟留言贴将从墙面上飘下,向用户飞来并在交互界面的中心放大显示。图11示意性地示出了基于浮层页面的内容展示效果示意图。如图11所示,作为显示背景的是叠加显示了虚拟“留言贴”的一墙面的场景图像1110,作为前景显示的是具有纸条外形的内容展示页面1120。在内容展示页面1120中,展示有作为留言的文本内容1121,同时还展示有音频内容1122。在显示文本内容1121的同时,可以自动播放对应于音频内容1122的音乐。
在内容展示页面1120中同时还可以提供多个对应不同交互功能的虚拟控件,例如图像采集控件1130、内容评论控件1140、内容转发控件1150、内容点赞控件1160、信息展示控件1170。利用这些虚拟控件或者基于触控动作的其他触发方式可以触发作用于内容展示页面的内容交互指令。响应于内容交互指令,可以在交互界面上显示与内容展示页面相对应的内容交互页面,不同的内容交互指令对应于不同的内容交互页面。图12示意性地示出了本发明一些示例性实施方式中显示内容交互页面的步骤流程图。如图12所示,在以上各实施例的基础上,在交互界面上显示与内容展示页面相对应的内容交互页面,可以包括以下步骤:
步骤S1210.当内容交互指令为图像采集指令时,在交互界面上显示包括场景图像以及目标媒体内容的图像采集页面。
例如当用户点击图11所示的图像采集控件1130即可触发图像采集指令,此时可以进入图像采集模式。图13示意性地示出了一种图像采集页面,如图13所示,图像采集页面中展示有场景图像1310以及目标媒体内容1320,场景图像1310上叠加显示有虚拟内容载体1330。同时,在图像采集页面中还可以提供一拍照按钮1340。用户通过点击拍照按钮1340便可以获得包含叠加显示有虚拟内容载体的场景图像以及目标媒体内容的照片。
步骤S1220.当内容交互指令为内容评论指令时,在交互界面上显示包括历史评论记录和评论编辑窗口的内容评论页面。
例如当用户点击图11所示的内容评论控件1140时可以触发内容评论指令,此时可以显示如图14所示的内容评论页面。如图14所示,在内容评论页面中展示有历史评论记录1410和评论编辑窗口1420。用户可以在评论编辑窗口1420中输入文本信息,以发表对当前目标媒体内容的评论。
步骤S1230.当内容交互指令为内容转发指令时,在交互界面上显示包括一个或者多个内容转发渠道的内容转发页面。
例如当用户点击图11所示的内容转发控件1150时可以触发内容转发指令,此时可以在交互界面上显示包括一个或者多个内容转发渠道的内容转发页面。通过选择内容转发渠道可以将目标虚拟内容载体以及携带的目标媒体内容发送给其他用户或者发送至其他网络社交平台。
步骤S1240.当内容交互指令为信息展示指令时,获取与目标虚拟内容载体相对应的目标对象信息,并在交互界面上显示包括目标对象信息以及对象交互控件的信息展示页面。
例如当用户点击图11所示的信息展示控件1170时,可以触发信息展示指令,此时可以在交互界面上显示如图15所示的信息展示页面。在信息展示页面中显示有对应于目标虚拟内容载体的目标对象信息1510,具体可以包括发布该虚拟内容载体的用户的头像、名称、性别等各种信息,同时还可以包括“关注”按钮1520。
在本发明的一些示例性实施方式中,当虚拟内容载体的数量较多时,各个虚拟内容载体在现实场景的场景图像上叠加显示的方式可以包括无覆盖排列、部分覆盖排列和全部覆盖排列中的至少一种。无覆盖排列指的是每个虚拟内容载体都在场景图像上完整显示,相互不会遮挡。部分覆盖排列指的是各个虚拟内容载体可以在一定程度上存在相互遮挡。全部覆盖排列指的是在场景图像上按照一定的排列顺序对所有的虚拟内容载体进行层叠显示,内层的虚拟内容载体将被外层的虚拟内容载体所遮挡。
在此基础上,在通过交互界面接收到针对至少一个虚拟内容载体的移动指令时,可以移动至少一个虚拟内容载体以改变多个虚拟内容载体之间的排列方式。例如,用户可以通过翻动或者移动外层的虚拟内容载体,以便查看位于内层的被部分遮挡或者完全遮挡的虚拟内容载体。
除了查看已有的虚拟内容载体以外,用户还可以通过触发载体创建指令,发布属于自己的虚拟内容载体。图16示意性地示出了本发明一些示例性实施方式中创建虚拟内容载体的步骤流程图。如图16所示,创建虚拟内容载体的方法可以包括以下步骤:
步骤S1610.响应于载体创建指令,在交互界面上显示包括多个内容填充区域的载体创建页面。
图17示意性地示出了一种载体创建页面的示意图。如图17所示,在载体创建页面中包括有多个内容填充区域1710,不同的内容填充区域可以用于填充文本内容、图像内容、音频内容或者视频内容等各种媒体内容。
步骤S1620.将一种或者多种选定媒体内容填充至内容填充区域,以得到携带选定媒体内容的待定虚拟内容载体。
用户可以通过输入文字、语音或者选取音乐、视频等方式将选定的媒体内容填充至内容填充区域以得到待定虚拟内容载体,图18示意性地示出了待定虚拟内容载体的示意图。如图18所示,该待定虚拟内容载体携带的文本内容是文字信息“风的故事”,该待定虚拟内容载体携带的音频内容是张国荣演唱的歌曲“风继续吹(Live)”。
步骤S1630.确定载体创建位置,并根据载体创建位置建立待定虚拟内容载体与现实场景的关联关系。
用户通过点击图18中所示的“确定”按钮可以进入位置选取模式,图19示意性地示出了在现实场景的场景图像上选取创建位置的界面示意图。如图19所示,在位置选取模式的交互界面上显示有用于标识创建位置的位置选取标识1910,同时还提供有载体创建控件1920。用户通过移动终端设备可以选取想要创建虚拟内容载体的位置,在选定位置后点击载体创建控件1920即完成创建,如图20所示,由步骤S1620得到的作为待定虚拟内容载体的虚拟留言贴2010将被张贴在墙面的指定位置上,由此建立待定虚拟内容载体与现实场景的关联关系。
示例性介质
在介绍了本发明示例性实施方式的方法之后,接下来,对本发明示例性实施方式的介质进行说明。
在一些可能的实施方式中,本发明的各个方面还可以实现为一种介质,其上存储有程序代码,当所述程序代码被设备的处理器执行时用于实现本说明书上述“示例性方法”部分中描述的根据本发明各种示例性实施方式的虚拟内容载体的交互方法中的步骤。
在本发明的一些示例性实施方式中,所述设备的处理器执行所述程序代码时可以用于实现如图3所示的以下步骤:
步骤S310.响应于场景显示指令,在交互界面上实时显示现实场景的场景图像。
步骤S320.获取与现实场景相关联的携带至少一种媒体内容的虚拟内容载体。
步骤S330.将虚拟内容载体叠加显示在现实场景的场景图像上。
步骤S340.响应于内容展示指令,在交互界面上显示与虚拟内容载体相关的内容展示页面。
在本发明的其他一些实施方式中,所述设备的处理器执行所述程序代码时也可以用于实现如图4至图20中所示的各个方法步骤。
需要说明的是:上述的介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以是但不限于:电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了可读程序代码。这种传播的数据信号可以采用多种形式,包括但不限于:电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质,该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、有线、光缆、RF等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、C++等,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中,远程计算设备可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算设备,或者,可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
示例性装置
在介绍了本发明示例性实施方式的介质之后,接下来,参考图21对本发明示例性实施方式的虚拟内容载体的交互装置进行说明。
图21示意性地示出了本发明一些示例性实施方式中的虚拟内容载体的交互装置的结构框图,该虚拟内容载体的交互装置应用于具有交互界面的终端设备。如图21所示,虚拟内容载体的交互装置2100主要可以包括:
图像显示模块2110,被配置为响应于场景显示指令,在交互界面上实时显示现实场景的场景图像;
载体获取模块2120,被配置为获取与现实场景相关联的携带至少一种媒体内容的虚拟内容载体;
载体显示模块2130,被配置为将虚拟内容载体叠加显示在现实场景的场景图像上;
内容展示模块2140,被配置为响应于内容展示指令,在交互界面上显示与虚拟内容载体相关的内容展示页面。
在本发明的一些示例性实施方式中,基于以上技术方案,图像显示模块2110可以包括:
编码识别单元2111,被配置为识别编码图像以得到编码图像中的编码信息;
指令触发单元2112,被配置为根据编码信息触发场景显示指令;
图像显示单元2113,被配置为根据场景显示指令在交互界面上实时显示现实场景的场景图像。
在本发明的一些示例性实施方式中,基于以上技术方案,载体获取模块2120可以包括:
第一标识确定单元2121,被配置为根据编码信息确定现实场景的场景标识信息;
第一载体获取单元2122,被配置为获取与场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
在本发明的另一些示例性实施方式中,基于以上技术方案,载体获取模块2120可以包括:
特征提取单元,被配置为对现实场景的场景图像进行特征提取以得到现实场景的图像特征;
第二标识确定单元,被配置为根据图像特征确定现实场景的场景标识信息;
第二载体获取单元,被配置为获取与场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
在本发明的另一些示例性实施方式中,基于以上技术方案,载体获取模块2120可以包括:
第一终端位置获取单元,被配置为获取终端设备的终端位置信息;
第三标识确定单元,被配置为根据终端位置信息确定现实场景的场景标识信息;
第三载体获取单元,被配置为获取与场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
在本发明的一些示例性实施方式中,基于以上技术方案,载体显示模块2130可以包括:
对象确定单元2131,被配置为确定对应于现实场景的真实场景对象;
对象位置获取单元2132,被配置为获取真实场景对象在现实场景的场景图像中的对象位置信息;
第一载体位置确定单元2133,被配置为根据对象位置信息确定虚拟内容载体的载体位置信息;
第一载体显示单元2134,被配置为根据载体位置信息将虚拟内容载体叠加显示在现实场景的场景图像上。
在本发明的另一些示例性实施方式中,基于以上技术方案,载体显示模块2130可以包括:
第二终端位置获取单元,被配置为获取终端设备的终端位置信息;
第二载体位置确定单元,被配置为根据终端位置信息确定虚拟内容载体的载体位置信息;
第二载体显示单元,被配置为根据载体位置信息将虚拟内容载体叠加显示在现实场景的场景图像上。
在本发明的一些示例性实施方式中,基于以上技术方案,内容展示模块2140包括:
目标载体确定单元2141,被配置为确定与内容展示指令相对应的目标虚拟内容载体;
目标内容获取单元2142,被配置为获取目标虚拟内容载体中携带的目标媒体内容;
目标内容展示单元2143,被配置为在交互界面上显示用于展示目标媒体内容的内容展示页面。
在本发明的一些示例性实施方式中,基于以上技术方案,目标内容展示单元被配置为以叠加显示了虚拟内容载体的现实场景的场景图像作为显示背景,显示用于展示目标媒体内容的内容展示页面。
在本发明的一些示例性实施方式中,基于以上技术方案,目标媒体内容包括文本内容、图像内容、音频内容和视频内容中的一种或者多种。
在本发明的一些示例性实施方式中,基于以上技术方案,虚拟内容载体的交互装置2100还包括:
内容交互模块,被配置为响应作用于内容展示页面的内容交互指令,在交互界面上显示与内容展示页面相对应的内容交互页面。
在本发明的一些示例性实施方式中,基于以上技术方案,内容交互模块包括:
图像采集单元,被配置为当内容交互指令为图像采集指令时,在交互界面上显示包括场景图像以及目标媒体内容的图像采集页面;
内容评论单元,被配置为当内容交互指令为内容评论指令时,在交互界面上显示包括历史评论记录和评论编辑窗口的内容评论页面;
内容转发单元,被配置为当内容交互指令为内容转发指令时,在交互界面上显示包括一个或者多个内容转发渠道的内容转发页面;
信息展示单元,被配置为当内容交互指令为信息展示指令时,获取与目标虚拟内容载体相对应的目标对象信息,并在交互界面上显示包括目标对象信息以及对象交互控件的信息展示页面。
在本发明的一些示例性实施方式中,基于以上技术方案,虚拟内容载体为多个,该多个虚拟内容载体之间的排列方式包括无覆盖排列、部分覆盖排列和全部覆盖排列中的至少一种;装置还包括:
载体移动模块,被配置为在通过交互界面接收到针对至少一个虚拟内容载体的移动指令时,移动至少一个虚拟内容载体以改变多个虚拟内容载体之间的排列方式。
在本发明的一些示例性实施方式中,基于以上技术方案,虚拟内容载体的交互装置2100还包括:
载体创建模块,被配置为响应于载体创建指令,在交互界面上显示包括多个内容填充区域的载体创建页面;
内容填充模块,被配置为将一种或者多种选定媒体内容填充至内容填充区域,以得到携带选定媒体内容的待定虚拟内容载体;
载体关联模块,被配置为确定载体创建位置,并根据载体创建位置建立待定虚拟内容载体与现实场景的关联关系。
以上各示例性实施方式中的虚拟内容载体的交互装置的具体细节已在相应的示例性方法部分做出详细说明,因此此处不再赘述。
示例性计算设备
在介绍了本发明示例性实施方式的方法、介质和装置之后,接下来,介绍根据本发明的另一示例性实施方式的计算设备。
所属技术领域的技术人员能够理解,本发明的各个方面可以实现为系统、方法或程序产品。因此,本发明的各个方面可以具体实现为以下形式,即:完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等),或硬件和软件方面结合的实施方式,这里可以统称为“电路”、“模块”或“系统”。
在一些可能的实施方式中,根据本发明实施方式的计算设备可以至少包括至少一个处理器、以及至少一个存储器。其中,所述存储器存储有程序代码,当所述程序代码被所述处理器执行时,使得所述处理器执行本说明书上述“示例性方法”部分中描述的根据本发明各种示例性实施方式的虚拟内容载体的交互方法中的步骤。
应当注意,尽管在上文详细描述中提及了虚拟内容载体的交互装置的若干单元或子单元,但是这种划分仅仅是示例性的,并非是强制性的。实际上,根据本发明的实施方式,上文描述的两个或更多模块或单元的特征和功能可以在一个模块或单元中具体化。反之,上文描述的一个模块或单元的特征和功能可以进一步划分为由多个模块或单元来具体化。
此外,尽管在附图中以特定顺序描述了本发明方法的操作,但是,这并非要求或者暗示必须按照该特定顺序来执行这些操作,或是必须执行全部所示的操作才能实现期望的结果。附加地或备选地,可以省略某些步骤,将多个步骤合并为一个步骤执行,和/或将一个步骤分解为多个步骤执行。
虽然已经参考若干具体实施方式描述了本发明的精神和原理,但是应该理解,本发明并不限于所发明的具体实施方式,对各方面的划分也不意味着这些方面中的特征不能组合以进行受益,这种划分仅是为了表述的方便。本发明旨在涵盖所附权利要求的精神和范围内所包括的各种修改和等同布置。

Claims (22)

1.一种虚拟内容载体的交互方法,应用于具有交互界面的终端设备,所述方法包括:
响应于场景显示指令,在所述交互界面上实时显示现实场景的场景图像;
获取与所述现实场景相关联的携带至少一种媒体内容的虚拟内容载体;获取所述终端设备的终端位置信息;根据所述终端位置信息确定所述虚拟内容载体的载体位置信息;根据所述载体位置信息将所述虚拟内容载体叠加显示在所述现实场景的场景图像上;
响应于内容展示指令,确定与所述内容展示指令相对应的目标虚拟内容载体;获取所述目标虚拟内容载体中携带的目标媒体内容;以叠加显示了所述虚拟内容载体的所述现实场景的场景图像作为显示背景,显示用于展示所述目标媒体内容的内容展示页面;所述目标媒体内容包括文本内容、图像内容、音频内容和视频内容中的一种或者多种。
2.根据权利要求1所述的方法,所述响应于场景显示指令,在所述交互界面上实时显示现实场景的场景图像,包括:
识别编码图像以得到所述编码图像中的编码信息;
根据所述编码信息触发场景显示指令;
根据所述场景显示指令在所述交互界面上实时显示现实场景的场景图像。
3.根据权利要求2所述的方法,所述获取与所述现实场景相关联的携带至少一种媒体内容的虚拟内容载体,包括:
根据所述编码信息确定所述现实场景的场景标识信息;
获取与所述场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
4.根据权利要求1所述的方法,所述获取与所述现实场景相关联的携带至少一种媒体内容的虚拟内容载体,包括:
对所述现实场景的场景图像进行特征提取以得到所述现实场景的图像特征;
根据所述图像特征确定所述现实场景的场景标识信息;
获取与所述场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
5.根据权利要求1所述的方法,所述获取与所述现实场景相关联的携带至少一种媒体内容的虚拟内容载体,包括:
获取所述终端设备的终端位置信息;
根据所述终端位置信息确定所述现实场景的场景标识信息;
获取与所述场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
6.根据权利要求1所述的方法,所述将所述虚拟内容载体叠加显示在所述现实场景的场景图像上,包括:
确定对应于所述现实场景的真实场景对象;
获取所述真实场景对象在所述现实场景的场景图像中的对象位置信息;
根据所述对象位置信息确定所述虚拟内容载体的载体位置信息;
根据所述载体位置信息将所述虚拟内容载体叠加显示在所述现实场景的场景图像上。
7.根据权利要求1所述的方法,所述方法还包括:
响应作用于所述内容展示页面的内容交互指令,在所述交互界面上显示与所述内容展示页面相对应的内容交互页面。
8.根据权利要求7所述的方法,所述在所述交互界面上显示与所述内容展示页面相对应的内容交互页面,包括:
当所述内容交互指令为图像采集指令时,在所述交互界面上显示包括所述场景图像以及所述目标媒体内容的图像采集页面;
当所述内容交互指令为内容评论指令时,在所述交互界面上显示包括历史评论记录和评论编辑窗口的内容评论页面;
当所述内容交互指令为内容转发指令时,在所述交互界面上显示包括一个或者多个内容转发渠道的内容转发页面;
当所述内容交互指令为信息展示指令时,获取与所述目标虚拟内容载体相对应的目标对象信息,并在所述交互界面上显示包括所述目标对象信息以及对象交互控件的信息展示页面。
9.根据权利要求1所述的方法,所述虚拟内容载体为多个,该多个虚拟内容载体之间的排列方式包括无覆盖排列、部分覆盖排列和全部覆盖排列中的至少一种;所述方法还包括:
在通过所述交互界面接收到针对至少一个虚拟内容载体的移动指令时,移动所述至少一个虚拟内容载体以改变所述多个虚拟内容载体之间的排列方式。
10.根据权利要求1所述的方法,所述方法还包括:
响应于载体创建指令,在所述交互界面上显示包括多个内容填充区域的载体创建页面;
将一种或者多种选定媒体内容填充至所述内容填充区域,以得到携带所述选定媒体内容的待定虚拟内容载体;
确定载体创建位置,并根据所述载体创建位置建立所述待定虚拟内容载体与所述现实场景的关联关系。
11.一种介质,其上存储有程序,该程序被处理器执行时实现如权利要求1至10中任一项所述的方法。
12.一种虚拟内容载体的交互装置,应用于具有交互界面的终端设备,所述装置包括:
图像显示模块,被配置为响应于场景显示指令,在所述交互界面上实时显示现实场景的场景图像;
载体获取模块,被配置为获取与所述现实场景相关联的携带至少一种媒体内容的虚拟内容载体;
载体显示模块,包括:第二终端位置获取单元,被配置为获取所述终端设备的终端位置信息;第二载体位置确定单元,被配置为根据所述终端位置信息确定所述虚拟内容载体的载体位置信息;第二载体显示单元,被配置为根据所述载体位置信息将所述虚拟内容载体叠加显示在所述现实场景的场景图像上;
内容展示模块,被配置为响应于内容展示指令,确定与所述内容展示指令相对应的目标虚拟内容载体;获取所述目标虚拟内容载体中携带的目标媒体内容;以叠加显示了所述虚拟内容载体的所述现实场景的场景图像作为显示背景,显示用于展示所述目标媒体内容的内容展示页面;所述目标媒体内容包括文本内容、图像内容、音频内容和视频内容中的一种或者多种。
13.根据权利要求12所述的装置,所述图像显示模块包括:
编码识别单元,被配置为识别编码图像以得到所述编码图像中的编码信息;
指令触发单元,被配置为根据所述编码信息触发场景显示指令;
图像显示单元,被配置为根据所述场景显示指令在所述交互界面上实时显示现实场景的场景图像。
14.根据权利要求13所述的装置,所述载体获取模块包括:
第一标识确定单元,被配置为根据所述编码信息确定所述现实场景的场景标识信息;
第一载体获取单元,被配置为获取与所述场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
15.根据权利要求12所述的装置,所述载体获取模块包括:
特征提取单元,被配置为对所述现实场景的场景图像进行特征提取以得到所述现实场景的图像特征;
第二标识确定单元,被配置为根据所述图像特征确定所述现实场景的场景标识信息;
第二载体获取单元,被配置为获取与所述场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
16.根据权利要求12所述的装置,所述载体获取模块包括:
第一终端位置获取单元,被配置为获取所述终端设备的终端位置信息;
第三标识确定单元,被配置为根据所述终端位置信息确定所述现实场景的场景标识信息;
第三载体获取单元,被配置为获取与所述场景标识信息相关联的携带至少一种媒体内容的虚拟内容载体。
17.根据权利要求12所述的装置,所述载体显示模块包括:
对象确定单元,被配置为确定对应于所述现实场景的真实场景对象;
对象位置获取单元,被配置为获取所述真实场景对象在所述现实场景的场景图像中的对象位置信息;
第一载体位置确定单元,被配置为根据所述对象位置信息确定所述虚拟内容载体的载体位置信息;
第一载体显示单元,被配置为根据所述载体位置信息将所述虚拟内容载体叠加显示在所述现实场景的场景图像上。
18.根据权利要求12所述的装置,所述装置还包括:
内容交互模块,被配置为响应作用于所述内容展示页面的内容交互指令,在所述交互界面上显示与所述内容展示页面相对应的内容交互页面。
19.根据权利要求18所述的装置,所述内容交互模块包括:
图像采集单元,被配置为当所述内容交互指令为图像采集指令时,在所述交互界面上显示包括所述场景图像以及所述目标媒体内容的图像采集页面;
内容评论单元,被配置为当所述内容交互指令为内容评论指令时,在所述交互界面上显示包括历史评论记录和评论编辑窗口的内容评论页面;
内容转发单元,被配置为当所述内容交互指令为内容转发指令时,在所述交互界面上显示包括一个或者多个内容转发渠道的内容转发页面;
信息展示单元,被配置为当所述内容交互指令为信息展示指令时,获取与所述目标虚拟内容载体相对应的目标对象信息,并在所述交互界面上显示包括所述目标对象信息以及对象交互控件的信息展示页面。
20.根据权利要求12所述的装置,所述虚拟内容载体为多个,该多个虚拟内容载体之间的排列方式包括无覆盖排列、部分覆盖排列和全部覆盖排列中的至少一种;所述装置还包括:
载体移动模块,被配置为在通过所述交互界面接收到针对至少一个虚拟内容载体的移动指令时,移动所述至少一个虚拟内容载体以改变所述多个虚拟内容载体之间的排列方式。
21.根据权利要求12所述的装置,所述装置还包括:
载体创建模块,被配置为响应于载体创建指令,在所述交互界面上显示包括多个内容填充区域的载体创建页面;
内容填充模块,被配置为将一种或者多种选定媒体内容填充至所述内容填充区域,以得到携带所述选定媒体内容的待定虚拟内容载体;
载体关联模块,被配置为确定载体创建位置,并根据所述载体创建位置建立所述待定虚拟内容载体与所述现实场景的关联关系。
22.一种计算设备,包括:处理器和存储器,所述存储器存储有可执行指令,所述处理器用于调用所述存储器存储的可执行指令执行如权利要求1至10中任一项所述的方法。
CN201911114942.1A 2019-11-14 2019-11-14 虚拟内容载体的交互方法、介质、装置和计算设备 Active CN110865708B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911114942.1A CN110865708B (zh) 2019-11-14 2019-11-14 虚拟内容载体的交互方法、介质、装置和计算设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911114942.1A CN110865708B (zh) 2019-11-14 2019-11-14 虚拟内容载体的交互方法、介质、装置和计算设备

Publications (2)

Publication Number Publication Date
CN110865708A CN110865708A (zh) 2020-03-06
CN110865708B true CN110865708B (zh) 2024-03-15

Family

ID=69653996

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911114942.1A Active CN110865708B (zh) 2019-11-14 2019-11-14 虚拟内容载体的交互方法、介质、装置和计算设备

Country Status (1)

Country Link
CN (1) CN110865708B (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111610998A (zh) * 2020-05-26 2020-09-01 北京市商汤科技开发有限公司 Ar场景内容的生成方法、展示方法、装置及存储介质
CN111651047B (zh) * 2020-06-05 2023-09-19 浙江商汤科技开发有限公司 一种虚拟物体展示方法、装置、电子设备及存储介质
CN113873266A (zh) * 2020-06-30 2021-12-31 中移(成都)信息通信科技有限公司 弹幕显示方法、用户终端、服务器、设备及存储介质
CN111833458B (zh) * 2020-06-30 2023-06-23 北京市商汤科技开发有限公司 图像显示方法及装置、设备、计算机可读存储介质
CN111870951B (zh) * 2020-08-24 2023-10-10 中国工商银行股份有限公司 页面展示方法和装置、以及页面确定方法和装置
CN114445500B (zh) * 2020-10-30 2023-11-10 北京字跳网络技术有限公司 增强现实场景构建方法、装置、终端设备和存储介质
CN113538703A (zh) * 2021-06-30 2021-10-22 北京市商汤科技开发有限公司 数据展示方法、装置、计算机设备及存储介质
CN113592171B (zh) * 2021-07-26 2022-07-12 深圳市天健(集团)股份有限公司 一种基于增强现实技术的建筑模板支撑系统安全预测方法、介质、装置和计算设备
CN114153214B (zh) * 2021-12-02 2023-05-23 浙江科顿科技有限公司 一种mr/ar/vr留言和创作场景控制方法、移动终端与可读存储介质
CN117111723A (zh) * 2022-05-17 2023-11-24 北京字跳网络技术有限公司 特效展示方法、装置、电子设备和存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101539804A (zh) * 2009-03-11 2009-09-23 上海大学 基于增强虚拟现实与异型屏的实时人机互动方法及系统
CN103164518A (zh) * 2013-03-06 2013-06-19 杭州九树网络科技有限公司 移动终端增强现实应用系统及方法
CN103366610A (zh) * 2013-07-03 2013-10-23 熊剑明 基于增强现实的三维互动学习系统及方法
CN104461318A (zh) * 2013-12-10 2015-03-25 苏州梦想人软件科技有限公司 基于增强现实技术的点读方法及系统
CN107564106A (zh) * 2017-07-07 2018-01-09 湖南简成信息技术有限公司 基于增强现实的运动活动控制方法、控制装置及设备
CN108269307A (zh) * 2018-01-15 2018-07-10 歌尔科技有限公司 一种增强现实交互方法及设备
EP3540570A1 (en) * 2018-03-13 2019-09-18 Thomson Licensing Method for generating an augmented representation of a real environment, corresponding device, computer program product, and computer-readable carrier medium

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120236172A1 (en) * 2011-03-14 2012-09-20 Geovector Corp. Multi Mode Augmented Reality Search Systems
US10019962B2 (en) * 2011-08-17 2018-07-10 Microsoft Technology Licensing, Llc Context adaptive user interface for augmented reality display
US10062208B2 (en) * 2015-04-09 2018-08-28 Cinemoi North America, LLC Systems and methods to provide interactive virtual environments
CN105955456B (zh) * 2016-04-15 2018-09-04 深圳超多维科技有限公司 虚拟现实与增强现实融合的方法、装置及智能穿戴设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101539804A (zh) * 2009-03-11 2009-09-23 上海大学 基于增强虚拟现实与异型屏的实时人机互动方法及系统
CN103164518A (zh) * 2013-03-06 2013-06-19 杭州九树网络科技有限公司 移动终端增强现实应用系统及方法
CN103366610A (zh) * 2013-07-03 2013-10-23 熊剑明 基于增强现实的三维互动学习系统及方法
CN104461318A (zh) * 2013-12-10 2015-03-25 苏州梦想人软件科技有限公司 基于增强现实技术的点读方法及系统
CN107564106A (zh) * 2017-07-07 2018-01-09 湖南简成信息技术有限公司 基于增强现实的运动活动控制方法、控制装置及设备
CN108269307A (zh) * 2018-01-15 2018-07-10 歌尔科技有限公司 一种增强现实交互方法及设备
EP3540570A1 (en) * 2018-03-13 2019-09-18 Thomson Licensing Method for generating an augmented representation of a real environment, corresponding device, computer program product, and computer-readable carrier medium

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
混合现实中的虚实融合与人机智能交融;陈宝权等;;中国科学:信息科学(第12期);全文 *

Also Published As

Publication number Publication date
CN110865708A (zh) 2020-03-06

Similar Documents

Publication Publication Date Title
CN110865708B (zh) 虚拟内容载体的交互方法、介质、装置和计算设备
US12001974B2 (en) Augmented reality smartglasses for use at cultural sites
US10769438B2 (en) Augmented reality
US11775165B2 (en) 3D cutout image modification
Langlotz et al. Next-generation augmented reality browsers: rich, seamless, and adaptive
JP7123122B2 (ja) 認知的洞察を使用したビデオ・シーンの移動
JP6237386B2 (ja) 映像ストリームをナビゲートするシステム、方法及びプログラム
US20180047213A1 (en) Method and apparatus for providing augmented reality-based dynamic service
US10147399B1 (en) Adaptive fiducials for image match recognition and tracking
CN113709561A (zh) 视频剪辑方法、装置、设备及存储介质
CN110809187B (zh) 视频选择方法、视频选择装置、存储介质与电子设备
CN108255291B (zh) 虚拟场景数据的传输方法、装置、存储介质及电子装置
CN110930517A (zh) 一种全景视频交互系统及方法
CN111651049B (zh) 交互方法、装置、计算机设备及存储介质
CN111652986B (zh) 舞台效果呈现方法、装置、电子设备及存储介质
CN113965773A (zh) 直播展示方法和装置、存储介质及电子设备
CN114967914A (zh) 一种虚拟显示方法、装置、设备以及存储介质
CN115115740A (zh) 思维导图识别方法、装置、设备、介质及程序产品
KR20160069663A (ko) 교육용 콘텐츠 제작 시스템, 제작방법, 및 그에 사용되는 서비스 서버, 저작자 단말, 클라이언트 단말
CN114529690B (zh) 增强现实场景呈现方法、装置、终端设备和存储介质
KR102248080B1 (ko) 실시간 영상을 통한 원격접속 융합현실 플랫폼 제공 시스템
KR102194008B1 (ko) 상품 이미지 인식 기반 증강현실 컨텐츠 제공방법
Khan The rise of augmented reality browsers: Trends, challenges and opportunities
GB2513865A (en) A method for interacting with an augmented reality scene
KR20170120299A (ko) 립모션을 이용한 실감형 콘텐츠 서비스 시스템

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant