CN106548517A - 基于增强现实技术进行视频会议的方法及装置 - Google Patents

Abstract

本发明提供了一种基于增强现实技术进行视频会议的方法及装置，应用于主会场所使用的包括摄像头及投影仪的智能终端，方法包括：通过摄像头采集主会场中的目标特征图片；获取与目标特征图片对应的虚拟三维素材，并通过投影仪对虚拟三维素材进行投射显示，以显示出虚拟三维素材对应的虚拟三维环境；通过摄像头采集主会场中的虚拟三维环境与现实环境相结合的图像；将采集到的图像传送给参加视频会议的分会场所使用的智能终端，以便分会场所使用的智能终端通过其内设置的投影仪对接收到的图像进行投射显示，以显示出虚拟三维环境与现实环境相结合的主会场场景。以此，可增加视频会议过程的趣味性，提高参会人员的积极性，进而提高会议交流效率。

Description

基于增强现实技术进行视频会议的方法及装置

技术领域

本发明涉及计算机领域，特别地，涉及一种基于增强现实技术进行视频会议的方法及装置。

背景技术

增强现实(AR，Augmented Reality)技术，是一种全新的人机交互技术，该技术可以模拟现实场景，让使用者能够通过虚拟现实系统，感受到客观物理世界中的事物，并且能突破空间、时间以及其他客观限制，感受真实世界中无法亲身经历的体验，以将真实世界信息和虚拟世界信息“无缝集成”。

目前，为了方便将处于不同地点的人员聚集起来进行交流，视频会议系统的应用越来越普遍，所谓视频会议系统是指能够通过传输线路、多媒体设备等，实现处于两个或两个以上不同地点(比如，主会场与各个分会场，或者，各个分会场)之间的音视频、数据等的实时交互。视频会议虽然比电话会议更加直观，但在会议内容较多、会议时间较长的情况下，会议过程难免会让各会场内的参会人员感觉到枯燥而影响会议交流效率，因此，如何能够提升视频会议过程中的趣味性，尤其是如何通过增强现实技术来提升视频会议过程中的趣味性，以提高交流效率，是目前需要解决的问题。

发明内容

本发明提供了一种基于增强现实技术进行视频会议的方法及装置，可增加视频会议过程的趣味性，提高参会人员的积极性，进而提高会议交流效率。

为实现上述目的，本发明提出了一种基于增强现实技术进行视频会议的方法，应用于参加视频会议的主会场所使用的智能终端，所述主会场所使用的智能终端中包括摄像头及投影仪，所述方法包括：

通过所述摄像头采集所述主会场中的目标特征图片；

获取与所述目标特征图片对应的虚拟三维素材，并通过所述投影仪对所述虚拟三维素材进行投射显示，以显示出所述虚拟三维素材对应的虚拟三维环境；

通过所述摄像头采集主会场中的虚拟三维环境与现实环境相结合的图像；

将采集到的所述图像传送给参加视频会议的分会场所使用的智能终端，以便所述分会场所使用的的智能终端通过其内设置的投影仪对接收到的图像进行投射显示，以显示出虚拟三维环境与现实环境相结合的主会场场景。

可选的，所述虚拟三维素材为预先使用虚拟三维素材开发工具根据所述特征图片开发出来并存储于所述主会场所使用的智能终端中。

可选的，所述主会场所使用的智能终端中还包括手势感应器，所述方法还包括：

通过所述手势感应器采集主会场中人员的手势变化信息；

根据采集到的手势变化信息调整所述虚拟三维环境中的内容，并将相应的调整指令发送给所述分会场所使用的智能终端，以便所述分会场所使用的智能终端根据所述调整指令对投射出的主会场场景中的内容进行相应的调整。

可选的，所述智能终端包括智能机器人。

可选的，所述虚拟三维素材包括：虚拟三维场景、虚拟三维物体或虚拟三维动画视频。

本发明还提出了一种基于增强现实技术进行视频会议的方法，应用于参加视频会议的分会场所使用的智能终端，所述智能终端包括投影仪，所述方法包括：

接收所述主会场所使用的智能终端发送的图像，所述图像为主会场中的虚拟三维环境与现实环境相结合的图像；

通过所述投影仪对所述图像进行投射显示，以显示出虚拟三维环境与现实环境相结合的主会场场景。

可选的，所述方法还包括：

接收所述主会场所使用的智能终端发送的对投射出的主会场场景中的内容进行调整的指令，根据调整指令对所述投射出的主会场场景的内容进行相应的调整。

可选的，所述智能终端包括智能机器人。

同时，本发明提出了一种基于增强现实技术进行视频会议的装置，设置于参加视频会议的主会场所使用的智能终端中，所述主会场所使用的智能终端还包括摄像头及投影仪，所述装置包括：

第一采集单元，用于通过所述摄像头采集所述主会场中的目标特征图片；

第一投影单元，用于获取与所述目标特征图片对应的虚拟三维素材，并通过所述投影仪对所述虚拟三维素材进行投射显示，以显示出所述虚拟三维素材对应的虚拟三维环境；

第二采集单元，用于通过所述摄像头采集主会场中的虚拟三维环境与现实环境相结合的图像；

传送单元，用于将采集到的所述图像传送给参加视频会议的分会场所使用的智能终端，以便所述分会场所使用的智能终端通过其内设置的投影仪对接收到的图像进行投射显示，以显示出虚拟三维环境与现实环境相结合的主会场场景。

本发明还提出了一种基于增强现实技术进行视频会议的装置，设置于参加视频会议的分会场所使用的智能终端中，所述智能终端还包括投影仪，所述装置包括：

接收单元，用于接收所述主会场所使用的智能终端发送的图像，所述图像为主会场中的虚拟三维环境与现实环境相结合的图像；

第二投影单元，用于通过所述投影仪对所述图像进行投射显示，以显示出虚拟三维环境与现实环境相结合的主会场场景。

本发明实施例提供了一种基于增强现实技术进行视频会议的方法及装置，应用于参加视频会议的主会场所使用的智能终端(其中包括摄像头及投影仪)，可先通过所述摄像头采集所述主会场中的目标特征图片，然后获取与所述目标特征图片对应的虚拟三维素材，并通过所述投影仪对所述虚拟三维素材进行投射显示，以显示出所述虚拟三维素材对应的虚拟三维环境，再通过所述摄像头采集主会场中的虚拟三维环境与现实环境相结合的图像，将采集到的所述图像传送给参加视频会议的分会场所使用的智能终端，以便所述分会场所使用的的智能终端通过其内设置的投影仪对接收到的图像进行投射显示，以显示出虚拟三维环境与现实环境相结合的主会场场景；相应的，应用于参加视频会议的分会场所使用的智能终端，可接收所述主会场所使用的智能终端发送的图像，所述图像为主会场中的虚拟三维环境与现实环境相结合的图像，然后通过所述投影仪对所述图像进行投射显示，以显示出虚拟三维环境与现实环境相结合的主会场场景。以此，可将增强现实技术与视频会议系统相结合，以将视频会议提升到一个新的高度，能够使视频会议的过程更加形象生动，可增加视频会议过程的趣味性，提高参会人员的积极性，进而提高会议交流效率。

附图说明

图1是本发明实施例提供的基于增强现实技术进行视频会议的第一方法流程图；

图2是本发明实施例提供的基于增强现实技术进行视频会议的第二方法流程图；

图3是本发明实施例提供的基于增强现实技术进行视频会议的第一装置示意图；

图4是本发明实施例提供的基于增强现实技术进行视频会议的第二装置示意图。

具体实施方式

为使本发明的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本发明作进一步详细的说明。

首先需要说明的是，由于参加视频会议的人员通常为处于两个或两个以上的不同地点，且通常存在会议召集方及会议参与方，因此，可将该不同的地点称为会场，会议召集方所在的会场可称为主会场，会议参与方所在的会场可称为分会场(分会场可为一个或多个)。基于此，在本实施例涉及到的实体可包括：参加视频会议的主会场所使用的智能终端、参加视频会议的分会场所使用的智能终端，各实体之间相互独立又相互配合，下面对具体的实现方式进行详细介绍。

实施例一

参看图1，该实施例一首先从参加视频会议的主会场所使用的智能终端的角度，提供了一种基于增强现实技术进行视频会议的方法。

所述智能终端可为智能机器人、智能手机、PAD等，在所述智能终端中设置有可采集图像的摄像头、可投射影像的投影仪等。

所述方法可以包括如下步骤：

S101,通过所述摄像头采集所述主会场中的目标特征图片。

在本实施例中，可选取与想要在视频会议展示的目标相关的图片，比如，想要在视频会议中展示建筑物的情况下，可选取与建筑物相关的图片；想要在视频会议中展示股票走势的情况下，可选取与股票走势图相关的图片，等等，为了提高后续步骤中对于图片的识别效果，可选择复杂且识别点多的图片，然后可将选取好的图片上传到相关网站(比如，https://developer.vuforia.com)，该网站则会对接收到的图片进行预置处理以生成特征图片。

在具体实现时，可以是在想要展示某一目标时，可由主会场中的人员手持一张打印出来的特征图片并对着智能终端的摄像头，或者，也可以是将打印出来的特征图片放置于主会场且摄像头能够采集到的某个位置，等等，然后，即可通过智能终端的摄像头对主会场中的特征图片进行采集，采集到的特征图片即为目标特征图片。

S102,获取与所述目标特征图片对应的虚拟三维素材，并通过所述投影仪对所述虚拟三维素材进行投射显示，以显示出所述虚拟三维素材对应的虚拟三维环境。

在具体实现时，可预先在虚拟三维素材开发工具(比如Unity)中开发出特征图片对应的虚拟三维素材。其中，所述虚拟三维素材可包括：虚拟三维场景、虚拟三维物体、虚拟三维动画视频等。

在本实施例中，特征图片与虚拟三维素材为一一对应关系，即一张特征图片对应一个虚拟三维素材，可将特征图片与虚拟三维素材存储主会场所使用的智能终端中，且可将特征图片与虚拟三维素材的对应关系以如下表1的形式存储于主会场所使用的智能终端。

特征图片	虚拟三维素材
		0001	A0001
0002	A0002
		……	……

表1

当采集到特征图片后，可对采集到的特征图片进行识别，在识别出特征图片后，可通过表1获取与所述目标特征图片对应的虚拟三维素材,并可通过所述投影仪对所述虚拟三维素材进行投射显示，以在现实中投射出一个虚拟三维环境，比如可为投射出一个与股票走势相关的虚拟三维动画视频、一个与建筑物相关的虚拟三维物体，等等。

S103,通过所述摄像头采集主会场中的虚拟三维环境与现实环境相结合的图像。

根据本实施例，在现实中投射出一个虚拟三维环境之后，主会场中的人员即可看到该虚拟三维环境，同时，主会场中还包括现实环境(即真实存在的人、物等)，比如桌椅、与会人员等等，在本实施例中，可通过摄像头实时地采集主会场中的图像，具体来说，可实时地采集主会场中的投射出的虚拟三维环境与现实环境相结合的图像。

S104，将采集到的所述图像传送给参加视频会议的分会场所使用的智能终端，以便所述分会场所使用的的智能终端通过其内设置的投影仪对接收到的图像进行投射显示，以显示出虚拟三维环境与现实环境相结合的主会场场景。

也就是说，可将S103中实时采集到的主会场中的虚拟三维环境与现实环境相结合的图像，实时地(或者以预置时间间隔)传送给参加视频会议的分会场所使用的智能终端，分会场所使用的智能终端则可通过其内设置的投影仪对接收到图像进行投射显示，以为分会场中的参会人员展示主会场场景，使得分会场中的参会人员可如置身于主会场一样，真切的感受到主会场的整体环境，而且由于主会场的整体环境为虚拟三维环境与现实环境相结合，以此，可将视频会议提升到一个新的高度，能够使视频会议更加生动直观，可增加视频会议过程的趣味性，提高参会人员的积极性，进而提高会议交流效率。

在本实施例中，不但可以显示虚拟三维环境，还可对虚拟三维环境中的内容进行调整，以进一步增加视频会议过程中的趣味性及交流效率。

在具体实现时，所述主会场所使用的智能终端中还可以包括手势感应器，以通过所述手势感应器采集主会场中参会人员的手势变化信息，然后根据采集到的手势变化信息调整所述虚拟三维环境中的内容，并将相应的调整指令发送给所述分会场所使用的智能终端，以便所述分会场所使用的智能终端根据所述调整指令对投射出的主会场场景中的内容进行相应的调整。

比如，在当前虚拟三维环境对应的虚拟三维素材为一幢建筑物的虚拟三维场景的情况下(比如在视频会议过程中演示一幢建筑物)，用户可以用手做出一个向左(也可以是其他方向)滑动的动作，当手势感应器采集到用户的手向滑动后，则可据此调整该虚拟三维场景中的内容(比如将该幢建筑物的位置向左移动)，或者，用户可以用大拇指和食指做出一个压缩的动作(比如，食指向大拇指靠近等)，则可据此调整该虚拟三维场景中的内容(比如，将该幢建筑物的体积缩小至预定比例)，等等，然后将相应的调整指令(比如，将该幢建筑物的位置向左移动的指令、将该幢建筑物的体积缩小预定比例的指令等)发送给所述分会场所使用的智能终端，以便所述分会场所使用的智能终端根据所述调整指令对投射出的主会场场景中的内容进行相应的调整，也即，所述分会场所使用的智能终端可根据所述调整指令对投射出主会场场景中的建筑物的位置向左移动、主会场场景中的建筑物的体积缩小至预定比例等，以此，可在视频会议过程中，对显示出的虚拟三维环境中的人、物等内容进行调整，提升视频会议的交互功能，进而提升视频会议过程的趣味性及交流效率。

实施例二

该实施例二是与实施例一相对应的参加视频会议的分会场所使用的智能终端的实现方式，参看图2，该实施例二从参加视频会议的分会场所使用的智能终端的角度提供了一种基于增强现实技术进行视频会议的方法，该方法具体可以包括如下步骤：

所述智能终端可为智能机器人、智能手机、PAD等，在所述智能终端中设置有可采集图像的摄像头、可投射影像的投影仪等。

所述方法可以包括如下步骤：

S201，接收所述主会场所使用的智能终端发送的图像，所述图像为虚拟三维环境与现实环境相结合的主会场场景。

S202，通过所述投影仪对所述图像进行投射显示，以显示出虚拟三维环境与现实环境相结合的主会场场景。

在具体实现时，所述方法，还可包括：接收所述主会场所使用的智能终端发送的对投射出的主会场场景中的内容进行调整的指令，根据调整指令对所述投射出的主会场场景的内容进行相应的调整。

由于实施例二与实施例一是相对应的，因此，相关的具体实现可以参见实施例一中的介绍，这里不再赘述。

本发明实施例提供了一种基于增强现实技术进行视频会议的方法，应用于参加视频会议的主会场所使用的智能终端(其中包括摄像头及投影仪)，可先通过所述摄像头采集所述主会场中的目标特征图片，然后获取与所述目标特征图片对应的虚拟三维素材，并通过所述投影仪对所述虚拟三维素材进行投射显示，以显示出所述虚拟三维素材对应的虚拟三维环境，再通过所述摄像头采集主会场中的虚拟三维环境与现实环境相结合的图像，将采集到的所述图像传送给参加视频会议的分会场所使用的智能终端，以便所述分会场所使用的的智能终端通过其内设置的投影仪对接收到的图像进行投射显示，以显示出虚拟三维环境与现实环境相结合的主会场场景；相应的，应用于参加视频会议的分会场所使用的智能终端，可接收所述主会场所使用的智能终端发送的图像，所述图像为主会场中的虚拟三维环境与现实环境相结合的图像，然后通过所述投影仪对所述图像进行投射显示，以显示出虚拟三维环境与现实环境相结合的主会场场景。以此，可将增强现实技术与视频会议系统相结合，以将视频会议提升到一个新的高度，能够使视频会议的过程更加形象生动，可增加视频会议过程的趣味性，提高参会人员的积极性，进而提高会议交流效率。

与前述实施例一中提供的基于增强现实技术进行视频会议的方法相对应，本申请实施例还提供了一种基于增强现实技术进行视频会议的装置。

在本实施例中，所述装置可设置于智能终端中，所述智能终端可为智能机器人、智能手机、PAD等，所述智能终端中可设置有摄像头及投影仪。

参看图3所示，所述装置可以包括：

第一采集单元31，用于通过所述摄像头采集所述主会场中的目标特征图片。

第一投影单元32，用于获取与所述目标特征图片对应的虚拟三维素材，并通过所述投影仪对所述虚拟三维素材进行投射显示，以显示出所述虚拟三维素材对应的虚拟三维环境。

在具体实现时，可预先在虚拟三维素材开发工具(比如Unity)中开发出特征图片对应的虚拟三维素材并存储于所述主会场所使用的智能终端中。其中，所述虚拟三维素材可包括：虚拟三维场景、虚拟三维物体、虚拟三维动画视频等。

第二采集单元33，用于通过所述摄像头采集主会场中的虚拟三维环境与现实环境相结合的图像。

传送单元34，用于将采集到的所述图像传送给参加视频会议的分会场所使用的智能终端，以便所述分会场所使用的智能终端通过其内设置的投影仪对接收到的图像进行投射显示，以显示出虚拟三维环境与现实环境相结合的主会场场景。

在具体实现时，所述主会场所使用的智能终端中还包括手势感应器，所述装置还可以包括：

第三采集单元，用于通过所述手势感应器采集主会场中人员的手势变化信息；

第一调整单元，用于根据采集到的手势变化信息调整虚拟三维环境中的内容，并将相应的调整指令发送给所述分会场所使用的智能终端，以便所述分会场所使用的智能终端根据所述调整指令对投射出的主会场场景中的内容进行相应的调整。

与前述实施例二中提供的基于增强现实技术进行视频会议的方法相对应，本申请实施例还提供了一种基于增强现实技术进行视频会议的装置。

在本实施例中，所述装置可设置于智能终端中，所述智能终端可为智能机器人、智能手机、PAD等，所述智能终端中可设置有摄像头及投影仪。

参看图4，所述装置可以包括：

接收单元41，用于接收所述主会场所使用的智能终端发送的图像，所述图像为主会场中的虚拟三维环境与现实环境相结合的图像。

第二投影单元42，用于通过所述投影仪对所述图像进行投射显示，以显示出虚拟三维环境与现实环境相结合的主会场场景。

在具体实现时，所述装置还可以包括：

第二调整单元，用于接收所述主会场所使用的智能终端发送的对投射出的主会场场景中的内容进行调整的指令，根据调整指令对所述投射出的主会场场景的内容进行相应的调整。

本发明实施例提供了一种基于增强现实技术进行视频会议的装置，应用于参加视频会议的主会场所使用的智能终端(其中包括摄像头及投影仪)，可先通过所述摄像头采集所述主会场中的目标特征图片，然后获取与所述目标特征图片对应的虚拟三维素材，并通过所述投影仪对所述虚拟三维素材进行投射显示，以显示出所述虚拟三维素材对应的虚拟三维环境，再通过所述摄像头采集主会场中的虚拟三维环境与现实环境相结合的图像，将采集到的所述图像传送给参加视频会议的分会场所使用的智能终端，以便所述分会场所使用的的智能终端通过其内设置的投影仪对接收到的图像进行投射显示，以显示出虚拟三维环境与现实环境相结合的主会场场景；相应的，应用于参加视频会议的分会场所使用的智能终端，可接收所述主会场所使用的智能终端发送的图像，所述图像为主会场中的虚拟三维环境与现实环境相结合的图像，然后通过所述投影仪对所述图像进行投射显示，以显示出虚拟三维环境与现实环境相结合的主会场场景。以此，可将增强现实技术与视频会议系统相结合，以将视频会议提升到一个新的高度，能够使视频会议的过程更加形象生动，可增加视频会议过程的趣味性，提高参会人员的积极性，进而提高会议交流效率。

以上对本发明实施例提供的基于增强现实技术进行视频会议的方法及装置进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种基于增强现实技术进行视频会议的方法，其特征在于，应用于参加视频会议的主会场所使用的智能终端，所述主会场所使用的智能终端中包括摄像头及投影仪，所述方法包括：

通过所述摄像头采集所述主会场中的目标特征图片；

获取与所述目标特征图片对应的虚拟三维素材，并通过所述投影仪对所述虚拟三维素材进行投射显示，以显示出所述虚拟三维素材对应的虚拟三维环境；

通过所述摄像头采集主会场中的虚拟三维环境与现实环境相结合的图像；

将采集到的所述图像传送给参加视频会议的分会场所使用的智能终端，以便所述分会场所使用的的智能终端通过其内设置的投影仪对接收到的图像进行投射显示，以显示出虚拟三维环境与现实环境相结合的主会场场景。

2.根据权利要求1所述的方法，其特征在于，所述虚拟三维素材为预先使用虚拟三维素材开发工具根据所述特征图片开发出来并存储于所述主会场所使用的智能终端中。

3.根据权利要求1所述的方法，其特征在于，所述主会场所使用的智能终端中还包括手势感应器，所述方法还包括：

通过所述手势感应器采集主会场中人员的手势变化信息；

根据采集到的手势变化信息调整所述虚拟三维环境中的内容，并将相应的调整指令发送给所述分会场所使用的智能终端，以便所述分会场所使用的智能终端根据所述调整指令对投射出的主会场场景中的内容进行相应的调整。

4.根据权利要求1所述的方法，其特征在于，所述智能终端包括智能机器人。

5.根据权利要求1至4任一项所述的方法，其特征在于，所述虚拟三维素材包括：虚拟三维场景、虚拟三维物体或虚拟三维动画视频。

6.一种基于增强现实技术进行视频会议的方法，其特征在于，应用于参加视频会议的分会场所使用的智能终端，所述智能终端包括投影仪，所述方法包括：

接收所述主会场所使用的智能终端发送的图像，所述图像为主会场中的虚拟三维环境与现实环境相结合的图像；

通过所述投影仪对所述图像进行投射显示，以显示出虚拟三维环境与现实环境相结合的主会场场景。

7.根据权利要求6所述的方法，其特征在于，还包括：

接收所述主会场所使用的智能终端发送的对投射出的主会场场景中的内容进行调整的指令，根据调整指令对所述投射出的主会场场景的内容进行相应的调整。

8.根据权利要求6所述的方法，其特征在于，所述智能终端包括智能机器人。

9.一种基于增强现实技术进行视频会议的装置，其特征在于，设置于参加视频会议的主会场所使用的智能终端中，所述主会场所使用的智能终端还包括摄像头及投影仪，所述装置包括：

第一采集单元，用于通过所述摄像头采集所述主会场中的目标特征图片；

第一投影单元，用于获取与所述目标特征图片对应的虚拟三维素材，并通过所述投影仪对所述虚拟三维素材进行投射显示，以显示出所述虚拟三维素材对应的虚拟三维环境；

第二采集单元，用于通过所述摄像头采集主会场中的虚拟三维环境与现实环境相结合的图像；

传送单元，用于将采集到的所述图像传送给参加视频会议的分会场所使用的智能终端，以便所述分会场所使用的智能终端通过其内设置的投影仪对接收到的图像进行投射显示，以显示出虚拟三维环境与现实环境相结合的主会场场景。

10.一种基于增强现实技术进行视频会议的装置，其特征在于，设置于参加视频会议的分会场所使用的智能终端中，所述智能终端还包括投影仪，所述装置包括：

接收单元，用于接收所述主会场所使用的智能终端发送的图像，所述图像为主会场中的虚拟三维环境与现实环境相结合的图像；

第二投影单元，用于通过所述投影仪对所述图像进行投射显示，以显示出虚拟三维环境与现实环境相结合的主会场场景。