CN104639865A - 视频会议体感控制方法、终端及系统 - Google Patents

Abstract

本发明涉及一种视频会议体感控制方法、终端及系统，其方法包括：体感控制器在视频会议过程中感应获取用户的手势动作信息帧，并发送至视频会议终端；视频会议终端对手势动作信息帧进行处理，由视频会议终端中的软件系统根据处理结果完成相应的GUI界面操作或输入，使得视频会议的参与者完全脱离现有的遥控器、手写白板等工具，也不必局促于坐在电脑前讲解课件等现象，与会者仅仅只需通过手势隔空操作显示界面，给用户带来更方便舒适的人机交互方式和更自由的与会感受，也提高了视频会议的灵活性、方便性与舒适性。

Description

视频会议体感控制方法、终端及系统

技术领域

本发明涉及移动通信技术领域，尤其涉及一种通过体感控制器来实现多种视频会议业务的视频会议体感控制方法、终端及系统。

背景技术

体感控制器（如Leap Motion体感控制器）作为一种超精准的手势追踪传感器，比现有的传感技术精准200倍。该设备体积较小，在通过USB连接电脑后，会创造出一个4立方英尺的工作空间。在这个空间里，用户10个手指的动作都会被即时追踪，误差在1/100毫米以内。这样的精准程度能保证用户顺利完成像pinch-to-zoom（双指缩放）或控制3D渲染物体等操作。

目前，基于Leap Motion可以在PC及Mac上通过手势来控制电脑，此外，还可以进行游戏、设计等复杂的操作。

若能将Leap Motion应用到会议电视系统中，则无疑是一种技术创新，因为现有的会议电视系统，必须通过遥控器上会，或者结合白板，通过隔空操作实现会议电视过程中的白板交互业务，或者与会者坐在电脑前讲解课件，通过课件文档来进行电视会议等，由此限制了用户的操作空间，给用户带来不便。

发明内容

本发明的主要目的在于提供一种视频会议体感控制方法、终端及系统，旨在实现视频会议过程中更方便舒适、自由的人机交互方式，提高视频会议方便性与舒适性。

为了达到上述目的，本发明提出一种视频会议体感控制方法，包括：

体感控制器在视频会议过程中感应获取用户的手势动作信息帧，并发送至视频会议终端；

所述视频会议终端接收到所述体感控制器发来的手势动作信息帧后，对所述手势动作信息帧进行处理；根据处理结果进行相应的GUI界面控制操作或输入。

优选地，所述视频会议终端对所述手势动作信息帧进行处理的步骤包括：

所述视频会议终端对所述手势动作信息帧进行解析，获取用户手势动作对应的数据；

根据获取的数据生成用户手势动作信息，所述用户手势动作信息包括如下信息中的一个或多个：平移运动参数、旋转运动参数、膨胀参数、变形参数以及方位参数；

根据所述用户手势动作信息确定用户的体感动作方式。

优选地，所述视频会议终端根据处理结果进行相应的GUI界面操作或输入的步骤包括：

所述视频会议终端根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型；

视频会议终端中的软件系统根据获取的所述对应的事件类型进行相应的GUI界面操作或输入。

优选地，所述体感控制器在视频会议过程中感应获取用户的手势动作信息帧的步骤之前还包括：

所述视频会议终端配置用户的体感动作方式与对应的事件类型之间的动作事件映射表。

优选地，所述视频会议终端根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型的步骤之前还包括：

所述视频会议终端判断所述用户的体感动作方式对应的手势状态是否符合预设条件，若是，则执行根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型的步骤。

本发明还提出一种视频会议体感控制方法，包括：

视频会议终端接收体感控制器发来的手势动作信息帧；

对所述手势动作信息帧进行处理；

根据处理结果进行相应的GUI界面操作或输入。

优选地，所述对手势动作信息帧进行处理的步骤包括：

对所述手势动作信息帧进行解析，获取用户手势动作对应的数据；

根据获取的数据生成用户手势动作信息，所述用户手势动作信息包括如下信息中的一个或多个：平移运动参数、旋转运动参数、膨胀参数、变形参数以及方位参数；

根据所述用户手势动作信息确定用户的体感动作方式。

优选地，所述根据处理结果进行相应的GUI界面操作或输入的步骤包括：

根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型；

通过视频会议终端中的软件系统根据获取的所述对应的事件类型进行相应的GUI界面操作或输入。

优选地，所述根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型的步骤之前还包括：

配置用户的体感动作方式与对应的事件类型之间的动作事件映射表。

优选地，所述根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型的步骤之前还包括：

判断所述用户的体感动作方式对应的手势状态是否符合预设条件，若是，则执行根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型的步骤。

本发明实施例还提出一种视频会议体感控制系统，包括：体感控制器、视频会议终端以及至少一显示设备，所述视频会议终端分别与所述体感控制器及显示设备连接，其中：

所述体感控制器，用于在视频会议过程中感应获取用户的手势动作信息帧，并发送至所述视频会议终端；

所述视频会议终端，用于接收到所述体感控制器发来的手势动作信息帧后，对所述手势动作信息帧进行处理，并根据处理结果进行相应的GUI界面操作或输入；

所述显示设备，用于根据所述视频会议终端的输出进行视频会议和GUI界面的显示。

优选地，所述视频会议终端，还用于对所述手势动作信息帧进行解析，获取用户手势动作对应的数据，根据获取的数据生成用户手势动作信息；根据所述用户手势动作信息确定用户的体感动作方式。

优选地，所述视频会议终端，还用于根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型；通过所述视频会议终端中的软件系统根据获取的所述对应的事件类型进行相应的GUI界面操作或输入。

优选地，所述视频会议终端，还用于配置用户的体感动作方式与对应的事件类型之间的动作事件映射表。

优选地，所述视频会议终端，还用于判断所述用户的体感动作方式对应的手势状态是否符合预设条件，若是，则根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型。

本发明还提出一种视频会议终端，包括：

接收模块，用于接收体感控制器发来的手势动作信息帧；

处理模块，用于对所述手势动作信息帧进行处理；

事件控制模块，用于根据处理结果进行相应的GUI界面操作或输入。

优选地，所述处理模块包括：

解析单元，用于对所述手势动作信息帧进行解析，获取用户手势动作对应的数据；生成单元，用于根据获取的数据生成用户手势动作信息，所述用户手势动作信息包括如下信息中的一个或多个：平移运动参数、旋转运动参数、膨胀参数、变形参数以及方位参数；

判定单元，用于根据所述用户手势动作信息确定用户的体感动作方式。

优选地，所述事件控制模块包括：

查找单元，用于根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型；

发送单元，用于通过所述视频会议终端中的软件系统根据获取的所述对应的事件类型进行相应的GUI界面操作或输入。

优选地，该视频会议终端还包括：

配置模块，用于配置用户的体感动作方式与对应的事件类型之间的动作事件映射表。

优选地，该视频会议终端还包括：

判断模块，用于判断所述用户的体感动作方式对应的手势状态是否符合预设条件，若是，则由所述查找单元根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型。

本发明实施例提出的一种视频会议体感控制方法、终端及系统，通过在传统会议电视系统中加入体感控制器硬件，通过体感控制器在视频会议过程中感应用户的手势动作信息帧，并发送至视频会议终端；视频会议终端接收到所述体感控制器发来的手势动作信息帧后，对手势动作信息帧进行进行处理；并由视频会议终端中的软件系统根据根据处理结果进行相应的GUI界面控制操作或输入，最终由显示设备进行视频会议和GUI界面的显示，使得视频会议的参与者完全脱离现有的遥控器、手写白板等工具，也不必局促于坐在电脑前讲解课件等现象，与会者仅仅只需通过手势隔空操作显示界面，相比于目前传统的会议电视系统，除了给用户带来更方便舒适的人机交互方式和更自由的与会感受外，也提高了视频会议的灵活性、方便性与舒适性。

附图说明

图1是本发明视频会议体感控制方法一实施例的流程示意图；

图2是本发明实施例中带体感控制器的会议电视的示意图；

图3是本发明视频会议体感控制方法另一实施例的流程示意图；

图4是本发明视频会议体感控制方法再一实施例的流程示意图；

图5是本发明视频会议体感控制方法再一实施例的流程示意图；

图6是本发明视频会议体感控制方法再一实施例的流程示意图；

图7是本发明视频会议体感控制系统一实施例的结构示意图；

图8是本发明视频会议终端统一实施例的结构示意图；

图9是本发明视频会议终端统一实施例中解析获取模块的结构示意图；

图10是本发明视频会议终端统一实施例中事件控制模块的结构示意图；

图11是本发明视频会议终端统另一实施例的结构示意图；

图12本发明视频会议终端统再一实施例的结构示意图。

为了使本发明的技术方案更加清楚、明了，下面将结合附图作进一步详述。

具体实施方式

应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

如图1所示，本发明一实施例提出一种视频会议体感控制方法，包括：

步骤S101，体感控制器在视频会议过程中感应获取用户的手势动作信息帧，并发送至视频会议终端；

本实施例采用Leap Motion等体感控制器的视频会议系统来代替传统视频会议中利用遥控器、白板、课件文档等操作业务的会议电视系统，实现视频会议过程中更方便舒适、自由的人机交互方式，以提高视频会议方便性与舒适性。

本实施例方法运行环境涉及体感控制器、视频会议终端以及显示设备，其中：

显示设备可以为具有显示功能的设备，比如电视、PC、笔记本、手机以及平板电脑等，本实施例以电视进行举例；显示设备可以根据会议需要分布在多个点，实现远程电视会议；

体感控制器具体可以采用Leap Motion体感控制器，体感控制器在视频会议过程中感应获取用户的手势动作信息帧，并发送至视频会议终端。

视频会议终端需要能够支持Leap Motion体感动作操控。

视频会议终端通过有线或无线接口与Leap Motion体感控制器通信，接收Leap Motion发送来的关于手的动作信息帧。每一个信息帧检测到的信息包括：手掌、手指、手持工具（细的、笔直的、比手指长的东西等）、所有可指向对象等的列表和信息。

步骤S102，所述视频会议终端接收到所述体感控制器发来的手势动作信息帧后，对所述手势动作信息帧进行处理，根据处理结果进行相应的GUI界面控制操作或输入。

视频会议终端接收到体感控制器发来的手势动作信息帧后，会进行体感动作的解析。具体过程如下：

首先，视频会议终端接收Leap Motion等体感控制器发来的手势动作信息帧后，对其进行解析，获取用户手势动作过程中的每一帧数据；

然后，比较前后帧数据的差异，生成用户手势动作信息，其中，用户手势动作信息根据不同的应用场景可以包括以下信息：平移运动参数、旋转运动参数、膨胀参数、变形参数以及方位参数中的一个或多个，当然还可以包括其他各种能判断手势动作的信息中的一个或多个，或者其他信息与上述各参数的组合等，在此不再列举。

之后，视频会议终端根据生成的用户手势动作信息确定用户的体感动作方式，比如：平移、旋转、抓取或者缩放等动作方式。而对于用户手持的工具，则可以识别出其长度、宽度、方向、位置和速度等。获取的这些手掌、手指和手持工具等的信息即可作为后续进一步体感动作控制使用。

之后，视频会议终端根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型。本实施例预先设定有一动作事件映射表，在该动作事件映射表种存储有设定的用户的体感动作方式及其对应的事件类型，比如，手指的左右上下平移、旋转、拖拽、抓取、伸张在屏幕上可能需要对应显示成屏幕的左右翻页、上下滚动，抓取文件或图标将其从一个地方拖到另一个地方，对文档或图片做放大或缩小显示，对桌面图标的点击等等。即需要将用户的体感动作方式转换为电视终端屏幕上对应的操作，从而精准、真实的实现手势原本想要达到的目的。

视频会议终端在获取到用户体感动作方式对应的事件类型后，视频会议终端中的软件系统根据对应的事件类型进行相应的GUI界面操作或输入，最终显示在显示设备上的效果比如为在电视屏幕进行左右翻页、上下滚动，抓取文件或图标将其从一个地方拖到另一个地方，对文档或图片做放大或缩小显示，对桌面图标的点击等。

视频会议终端中的软件系统会将体感控制事件执行结果输出至视频会议中的每一显示设备，显示设备根据视频会议终端的输出进行视频会议和GUI界面的显示。

以电视为例，作为用户体感动作的体现，电视在从视频会议终端接收到体感控制事件执行结果的输出信息后，根据手势的动作范围和电视机显示屏幕的大小，按比例生成显示信息，提交到上层GUI显示模块在屏幕上显示出真实手指、手持工具的图像。或者，由视频会议终端体现出用户的动作意图后，例如操作屏幕上关机按键的体感动作完成后，电视终端正常响应手势而安全关机。如图2所示，其为本实施例中带Leap Motion的会议电视的示意图。

本实施例通过上述方案，通过在传统会议电视系统中加入Leap Motion等体感控制器硬件，通过体感控制器在视频会议过程中感应用户的手势动作信息帧，并发送至视频会议终端；视频会议终端接收到所述体感控制器发来的手势动作信息帧后，对手势动作信息帧进行解析，获取用户的体感动作方式；根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型，由视频会议终端中的软件系统根据获取的对应的事件类型进行相应的GUI界面操作或输入，使得视频会议的参与者完全脱离现有的遥控器、手写白板等工具，也不必局促于坐在电脑前讲解课件等现象，与会者仅仅只需通过手势隔空操作显示界面，由此，通过隔空的动作达到操作显示屏的目的。相比于目前传统的会议电视系统，除了给用户带来更方便舒适的人机交互方式和更自由的与会感受外，也提高了视频会议的灵活性、方便性与舒适性。

如图3所示，本发明另一实施例提出一种视频会议体感控制方法，在上述第一实施例的基础上，在上述步骤S101：体感控制器在视频会议过程中感应获取用户的手势动作信息帧之前还包括：

步骤S100，视频会议终端配置用户的体感动作方式与对应的事件类型之间的动作事件映射表。

本实施例与上述第一实施例的区别在于，本实施例还包括配置用户的体感动作方式与对应的事件类型之间的动作事件映射表。

具体地，本实施例针对用户的每一体感动作方式设定有一对应的事件类型，并将设定的用户的体感动作方式及其对应的事件类型存储至动作事件映射表中，比如，手指的左右上下平移、旋转、拖拽、抓取、伸张在屏幕上可能需要对应显示成屏幕的左右翻页、上下滚动，抓取文件或图标将其从一个地方拖到另一个地方，对文档或图片做放大或缩小显示，对桌面图标的点击等等。即需要将用户的体感动作方式转换为电视终端屏幕上对应的操作，从而精准、真实的实现手势原本想要达到的目的。

后续，视频会议终端在获取到用户体感动作方式后，即可查找该动作事件映射表，获取对应的事件类型，之后视频会议终端中的软件系统即可根据对应的事件类型，进行相应的GUI界面操作或输入。

需要说明的是，上述步骤S100还可以在上述步骤S102之前实施。

本实施例通过上述方案，通过设定用户的体感动作方式与对应的事件类型之间的动作事件映射表，并在传统会议电视系统中加入Leap Motion等体感控制器硬件，通过体感控制器在视频会议过程中感应用户的手势动作信息帧，并发送至视频会议终端；视频会议终端接收到所述体感控制器发来的手势动作信息帧后，对手势动作信息帧进行解析，获取用户的体感动作方式；根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型，视频会议终端中的软件系统根据获取的所述对应的事件类型进行相应的GUI界面操作或输入，使得视频会议的参与者完全脱离现有的遥控器、手写白板等工具，也不必局促于坐在电脑前讲解课件等现象，与会者仅仅只需通过手势隔空操作显示界面，相比于目前传统的会议电视系统，除了给用户带来更方便舒适的人机交互方式和更自由的与会感受外，也提高了视频会议的灵活性、方便性与舒适性。

进一步地，本实施例还可以包括对用户的体感动作方式对应的手势状态进行判断的方案，以防止用户的误操作。

例如，传统的鼠标操作中，鼠标被悬空后的移动在屏幕上是不表现出来的，同理，在本实施例中，也需要有这样的处理方式来实现操作者想移动双手但又不希望该移动表现在屏幕上的意图。

因此，可以针对用户的手势状态，约定一种标准条件，当用户的体感动作方式对应的手势状态符合预设条件时，根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型，以便视频会议终端中的软件系统根据获取的所述对应的事件类型进行相应的GUI界面操作或输入；否则，用户的体感动作方式对应的手势状态不符合预设条件时，不执行上述操作，使手势动作不在屏幕上显示或生效。

比如，可以设定以下条件，当检测到用户的手势类似握拳状态即没有手指指尖信息的时候，手势的移动不在屏幕上显示。从而避免了用户的误操作，提高了视频会议的有效性。

本实施例通过上述方案，通过在传统会议电视系统中加入Leap Motion等体感控制器硬件，通过体感控制器在视频会议过程中感应用户的手势动作信息帧，并发送至视频会议终端；视频会议终端接收到所述体感控制器发来的手势动作信息帧后，对手势动作信息帧进行解析，获取用户的体感动作方式；根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型，视频会议终端中的软件系统根据获取的所述对应的事件类型进行相应的GUI界面操作或输入，使得视频会议的参与者完全脱离现有的遥控器、手写白板等工具，也不必局促于坐在电脑前讲解课件等现象，与会者仅仅只需通过手势隔空操作显示界面，相比于目前传统的会议电视系统，除了给用户带来更方便舒适的人机交互方式和更自由的与会感受外，也提高了视频会议的灵活性、方便性与舒适性。此外，还可对用户的体感动作方式对应的手势状态进行判断，以防止用户的误操作，提高视频会议的有效性。

如图4所示，本发明一实施例从视频会议终端侧提出一种视频会议体感控制方法，包括：

步骤S201，视频会议终端接收体感控制器发来的手势动作信息帧；

本实施例采用Leap Motion等体感控制器的视频会议系统来代替传统视频会议中利用遥控器、白板、课件文档等操作业务的会议电视系统，实现视频会议过程中更方便舒适、自由的人机交互方式，以提高视频会议方便性与舒适性。

其中：显示设备可以为具有显示功能的设备，比如电视、PC、笔记本、手机以及平板电脑等，本实施例以电视进行举例；显示设备可以根据会议需要分布在多个点，实现远程电视会议；

体感控制器具体可以采用Leap Motion体感控制器，体感控制器在视频会议过程中感应获取用户的手势动作信息帧，并发送至视频会议终端。

视频会议终端需要能够支持Leap Motion体感动作操控。

视频会议终端通过有线或无线接口与Leap Motion体感控制器通信，接收Leap Motion发送来的关于手的动作信息帧。每一个信息帧检测到的信息包括：手掌、手指、手持工具（细的、笔直的、比手指长的东西等）、所有可指向对象等的列表和信息。

步骤S202，对所述手势动作信息帧进行处理；

视频会议终端接收到体感控制器发来的手势动作信息帧后，会进行体感动作的解析。具体过程如下：

首先，视频会议终端接收Leap Motion等体感控制器发来的手势动作信息帧后，对其进行解析，获取用户手势动作过程中的每一帧数据；

然后，比较前后帧数据的差异，生成用户手势动作信息，其中，用户手势动作信息根据不同的应用场景可以包括以下信息：平移运动参数、旋转运动参数、膨胀参数、变形参数以及方位参数中的一个或多个，当然还可以包括其他各种能判断手势动作的信息中的一个或多个，或者其他信息与上述各参数的组合等，在此不再列举。

之后，视频会议终端根据生成的用户手势动作信息确定用户的体感动作方式，比如：平移、旋转、抓取或者缩放等动作方式。而对于用户手持的工具，则可以识别出其长度、宽度、方向、位置和速度等。获取的这些手掌、手指和手持工具等的信息即可作为后续进一步体感动作控制使用。

步骤S203，根据处理结果进行相应的GUI界面操作或输入。

首先，视频会议终端根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型。本实施例预先设定有一动作事件映射表，在该动作事件映射表种存储有设定的用户的体感动作方式及其对应的事件类型，比如，手指的左右上下平移、旋转、拖拽、抓取、伸张在屏幕上可能需要对应显示成屏幕的左右翻页、上下滚动，抓取文件或图标将其从一个地方拖到另一个地方，对文档或图片做放大或缩小显示，对桌面图标的点击等等。即需要将用户的体感动作方式转换为电视终端屏幕上对应的操作，从而精准、真实的实现手势原本想要达到的目的。

视频会议终端在获取到用户体感动作方式对应的事件类型后，视频会议终端中的软件系统根据对应的事件类型进行相应的GUI界面操作或输入，最终显示在显示设备上的效果比如为在电视屏幕进行左右翻页、上下滚动，抓取文件或图标将其从一个地方拖到另一个地方，对文档或图片做放大或缩小显示，对桌面图标的点击等。

视频会议终端中的软件系统会将体感控制事件执行结果输出至视频会议中的每一显示设备，显示设备根据视频会议终端的输出进行视频会议和GUI界面的显示。

以电视为例，作为用户体感动作的体现，电视在从视频会议终端接收到体感控制事件执行结果的输出信息后，根据手势的动作范围和电视机显示屏幕的大小，按比例生成显示信息，提交到上层GUI显示模块在屏幕上显示出真实手指、手持工具的图像。或者，由视频会议终端体现出用户的动作意图后，例如操作屏幕上关机按键的体感动作完成后，电视终端正常响应手势而安全关机。如图2所示，其为本实施例中带Leap Motion的会议电视的示意图。

本实施例通过上述方案，通过在传统会议电视系统中加入Leap Motion等体感控制器硬件，通过体感控制器在视频会议过程中感应用户的手势动作信息帧，并发送至视频会议终端；视频会议终端接收到所述体感控制器发来的手势动作信息帧后，对手势动作信息帧进行解析，获取用户的体感动作方式；根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型，由视频会议终端中的软件系统根据获取的对应的事件类型进行相应的GUI界面操作或输入，使得视频会议的参与者完全脱离现有的遥控器、手写白板等工具，也不必局促于坐在电脑前讲解课件等现象，与会者仅仅只需通过手势隔空操作显示界面，由此，通过隔空的动作达到操作显示屏的目的。相比于目前传统的会议电视系统，除了给用户带来更方便舒适的人机交互方式和更自由的与会感受外，也提高了视频会议的灵活性、方便性与舒适性。

如图5所示，本发明另一实施例从视频会议终端侧提出一种视频会议体感控制方法，在上述图4所示的第一实施例的基础上，在上述步骤S203：根据处理结果进行相应的GUI界面操作或输入之前还包括：

步骤S200，配置用户的体感动作方式与对应的事件类型之间的动作事件映射表。该步骤可以在上述步骤S201之前实施，也可以在步骤S201与步骤S202之间实施，还可以在步骤S202与步骤S203之间实施。

本实施例与上述第一实施例的区别在于，本实施例还包括配置用户的体感动作方式与对应的事件类型之间的动作事件映射表。

具体地，本实施例针对用户的每一体感动作方式设定有一对应的事件类型，并将设定的用户的体感动作方式及其对应的事件类型存储至动作事件映射表中，比如，手指的左右上下平移、旋转、拖拽、抓取、伸张在屏幕上可能需要对应显示成屏幕的左右翻页、上下滚动，抓取文件或图标将其从一个地方拖到另一个地方，对文档或图片做放大或缩小显示，对桌面图标的点击等等。即需要将用户的体感动作方式转换为电视终端屏幕上对应的操作，从而精准、真实的实现手势原本想要达到的目的。

后续，视频会议终端在获取到用户体感动作方式后，即可查找该动作事件映射表，获取对应的事件类型，之后视频会议终端中的软件系统即可根据对应的事件类型，进行相应的GUI界面操作或输入。

本实施例通过上述方案，通过设定用户的体感动作方式与对应的事件类型之间的动作事件映射表，并在传统会议电视系统中加入Leap Motion等体感控制器硬件，通过体感控制器在视频会议过程中感应用户的手势动作信息帧，并发送至视频会议终端；视频会议终端接收到所述体感控制器发来的手势动作信息帧后，对手势动作信息帧进行解析，获取用户的体感动作方式；根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型，视频会议终端中的软件系统根据获取的所述对应的事件类型进行相应的GUI界面操作或输入，使得视频会议的参与者完全脱离现有的遥控器、手写白板等工具，也不必局促于坐在电脑前讲解课件等现象，与会者仅仅只需通过手势隔空操作显示界面，相比于目前传统的会议电视系统，除了给用户带来更方便舒适的人机交互方式和更自由的与会感受外，也提高了视频会议的灵活性、方便性与舒适性。

如图6所示，本发明又一实施例从视频会议终端侧提出一种视频会议体感控制方法，在上述图4所示的第一实施例的基础上，在上述步骤S203：根据处理结果进行相应的GUI界面操作或输入之前还包括：

步骤S204：判断所述用户的体感动作方式对应的手势状态是否符合预设条件，若是，则进入步骤S203；否则，结束流程。

本实施例与上述第一实施例的区别在于，本实施例还包括对用户的体感动作方式对应的手势状态的判断，以防止用户的误操作。

例如，传统的鼠标操作中，鼠标被悬空后的移动在屏幕上是不表现出来的，同理，在本实施例中，也需要有这样的处理方式来实现操作者想移动双手但又不希望该移动表现在屏幕上的意图。

因此，可以针对用户的手势状态，约定一种标准条件，当用户的体感动作方式对应的手势状态符合预设条件时，根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型，以便视频会议终端中的软件系统根据获取的所述对应的事件类型进行相应的GUI界面操作或输入；否则，用户的体感动作方式对应的手势状态不符合预设条件时，不执行上述操作，使手势动作不在屏幕上显示或生效。

比如，可以设定以下条件，当检测到用户的手势类似握拳状态即没有手指指尖信息的时候，手势的移动不在屏幕上显示。从而避免了用户的误操作，提高了视频会议的有效性。

需要说明的是，上述图5和图6所示的实施例可以组合实施。

本实施例通过上述方案，通过在传统会议电视系统中加入Leap Motion等体感控制器硬件，通过体感控制器在视频会议过程中感应用户的手势动作信息帧，并发送至视频会议终端；视频会议终端接收到所述体感控制器发来的手势动作信息帧后，对手势动作信息帧进行解析，获取用户的体感动作方式；根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型，视频会议终端中的软件系统根据获取的所述对应的事件类型进行相应的GUI界面操作或输入，使得视频会议的参与者完全脱离现有的遥控器、手写白板等工具，也不必局促于坐在电脑前讲解课件等现象，与会者仅仅只需通过手势隔空操作显示界面，相比于目前传统的会议电视系统，除了给用户带来更方便舒适的人机交互方式和更自由的与会感受外，也提高了视频会议的灵活性、方便性与舒适性。此外，还可对用户的体感动作方式对应的手势状态进行判断，以防止用户的误操作，提高视频会议的有效性。

如图7所示，本发明一实施例提出一种视频会议体感控制系统，包括：体感控制器301、视频会议终端302以及至少一显示设备303，所述视频会议终端302分别与所述体感控制器301及显示设备303通信连接，其中：

所述体感控制器301，用于在视频会议过程中感应获取用户的手势动作信息帧，并发送至所述视频会议终端302；

所述视频会议终端302，用于接收到所述体感控制器301发来的手势动作信息帧后，对所述手势动作信息帧进行处理，并根据处理结果进行相应的GUI界面操作或输入；

所述显示设备，用于根据所述视频会议终端的输出进行视频会议和GUI界面的显示。

具体地，本实施例采用Leap Motion等体感控制器301的视频会议系统来代替传统视频会议中利用遥控器、白板、课件文档等操作业务的会议电视系统，实现视频会议过程中更方便舒适、自由的人机交互方式，以提高视频会议方便性与舒适性。

其中，显示设备303可以为具有显示功能的设备，比如电视、PC、笔记本、手机以及平板电脑等，本实施例以电视进行举例；显示设备303可以根据会议需要分布在多个点，实现远程电视会议；

体感控制器301具体可以采用Leap Motion体感控制器301，体感控制器301在视频会议过程中感应获取用户的手势动作信息帧，并发送至视频会议终端302。

视频会议终端302需要能够支持Leap Motion体感动作操控。

视频会议终端302通过有线或无线接口与Leap Motion等体感控制器301通信，接收Leap Motion等体感控制器301发送来的关于手的动作信息帧。每一个信息帧检测到的信息包括：手掌、手指、手持工具（细的、笔直的、比手指长的东西等）、所有可指向对象等的列表和信息。

视频会议终端302接收到体感控制器301发来的手势动作信息帧后，会进行体感动作的解析。具体过程如下：

首先，视频会议终端302接收Leap Motion等体感控制器301发来的手势动作信息帧后，对其进行解析，获取用户手势动作过程中的每一帧数据；

然后，比较前后帧数据的差异，生成用户手势动作信息，其中，用户手势动作信息根据不同的应用场景可以包括以下信息：平移运动参数、旋转运动参数、膨胀参数、变形参数以及方位参数中的一个或多个，当然还可以包括其他各种能判断手势动作的信息中的一个或多个，或者其他信息与上述各参数的组合等，在此不再列举。

之后，视频会议终端302根据生成的用户手势动作信息确定用户的体感动作方式，比如：平移、旋转、抓取或者缩放等动作方式。而对于用户手持的工具，则可以识别出其长度、宽度、方向、位置和速度等。获取的这些手掌、手指和手持工具等的信息即可作为后续进一步体感动作控制使用。

之后，视频会议终端302根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型。本实施例预先设定有一动作事件映射表，在该动作事件映射表种存储有设定的用户的体感动作方式及其对应的事件类型，比如，手指的左右上下平移、旋转、拖拽、抓取、伸张在屏幕上可能需要对应显示成屏幕的左右翻页、上下滚动，抓取文件或图标将其从一个地方拖到另一个地方，对文档或图片做放大或缩小显示，对桌面图标的点击等等。即需要将用户的体感动作方式转换为电视终端屏幕上对应的操作，从而精准、真实的实现手势原本想要达到的目的。

视频会议终端302在获取到用户体感动作方式对应的事件类型后，视频会议终端302中的软件系统进行相应的GUI界面操作或输入，最终显示在显示设备303上的效果比如为在电视屏幕进行左右翻页、上下滚动，抓取文件或图标将其从一个地方拖到另一个地方，对文档或图片做放大或缩小显示，对桌面图标的点击等。

视频会议终端302会将生成的体感控制事件执行结果输出至视频会议中的每一显示设备303。

以电视为例，作为用户体感动作的体现，电视在从视频会议终端302接收到体感控制事件执行结果的输出信息后，根据手势的动作范围和电视机显示屏幕的大小，按比例生成显示信息，提交到上层GUI显示模块在屏幕上显示出真实手指、手持工具的图像。或者，由视频会议终端302体现出用户的动作意图后，例如操作屏幕上关机按键的体感动作完成后，电视终端正常响应手势而安全关机。如图2所示，其为本实施例中带Leap Motion的会议电视的示意图。

本实施例通过上述方案，通过在传统会议电视系统中加入Leap Motion等体感控制器硬件，通过体感控制器在视频会议过程中感应用户的手势动作信息帧，并发送至视频会议终端；视频会议终端接收到所述体感控制器发来的手势动作信息帧后，对手势动作信息帧进行解析，获取用户的体感动作方式；根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型，由视频会议终端中的软件系统根据获取的对应的事件类型进行相应的GUI界面操作或输入，使得视频会议的参与者完全脱离现有的遥控器、手写白板等工具，也不必局促于坐在电脑前讲解课件等现象，与会者仅仅只需通过手势隔空操作显示界面，由此，通过隔空的动作达到操作显示屏的目的。相比于目前传统的会议电视系统，除了给用户带来更方便舒适的人机交互方式和更自由的与会感受外，也提高了视频会议的灵活性、方便性与舒适性。

进一步地，所述视频会议终端302，还用于配置用户的体感动作方式与对应的事件类型之间的动作事件映射表。

具体地，本实施例针对用户的每一体感动作方式设定有一对应的事件类型，并将设定的用户的体感动作方式及其对应的事件类型存储至动作事件映射表中，比如，手指的左右上下平移、旋转、拖拽、抓取、伸张在屏幕上可能需要对应显示成屏幕的左右翻页、上下滚动，抓取文件或图标将其从一个地方拖到另一个地方，对文档或图片做放大或缩小显示，对桌面图标的点击等等。即需要将用户的体感动作方式转换为电视终端屏幕上对应的操作，从而精准、真实的实现手势原本想要达到的目的。

后续，视频会议终端302在获取到用户体感动作方式后，即可查找该动作事件映射表，获取对应的事件类型，之后视频会议终端中的软件系统即可根据对应的事件类型进行相应的GUI界面操作或输入。

所述视频会议终端302，还用于判断所述用户的体感动作方式对应的手势状态是否符合预设条件，若是，则进行相应的GUI界面操作或输入；否则，不执行上述操作。

例如，传统的鼠标操作中，鼠标被悬空后的移动在屏幕上是不表现出来的，同理，在本实施例中，也需要有这样的处理方式来实现操作者想移动双手但又不希望该移动表现在屏幕上的意图。

因此，可以针对用户的手势状态，约定一种标准条件，当用户的体感动作方式对应的手势状态符合预设条件时，根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型，以便视频会议终端中的软件系统根据获取的所述对应的事件类型进行相应的GUI界面操作或输入；否则，用户的体感动作方式对应的手势状态不符合预设条件时，不执行上述操作，使手势动作不在屏幕上显示或生效。

比如，可以设定以下条件，当检测到用户的手势类似握拳状态即没有手指指尖信息的时候，手势的移动不在屏幕上显示。从而避免了用户的误操作，提高了视频会议的有效性。

如图8所示，本发明一实施例提出一种视频会议终端，包括：接收模块401、处理模块402及事件控制模块403，其中：

接收模块401，用于接收体感控制器发来的手势动作信息帧；

处理模块402，用于对所述手势动作信息帧进行处理；

事件控制模块403，用于根据处理结果进行相应的GUI界面操作或输入。

本实施例采用Leap Motion等体感控制器的视频会议系统来代替传统视频会议中利用遥控器、白板、课件文档等操作业务的会议电视系统，实现视频会议过程中更方便舒适、自由的人机交互方式，以提高视频会议方便性与舒适性。

本实施例方案涉及体感控制器、视频会议终端以及显示设备，其中：

显示设备可以为具有显示功能的设备，比如电视、PC、笔记本、手机以及平板电脑等，本实施例以电视进行举例；显示设备可以根据会议需要分布在多个点，实现远程电视会议；

体感控制器具体可以采用Leap Motion体感控制器，体感控制器在视频会议过程中感应获取用户的手势动作信息帧，并发送至视频会议终端。

视频会议终端需要能够支持Leap Motion体感动作操控。

视频会议终端通过有线或无线接口与Leap Motion体感控制器通信，接收Leap Motion发送来的关于手的动作信息帧。每一个信息帧检测到的信息包括：手掌、手指、手持工具（细的、笔直的、比手指长的东西等）、所有可指向对象等的列表和信息。

视频会议终端接收到体感控制器发来的手势动作信息帧后，会进行体感动作的解析。具体过程如下：

首先，视频会议终端接收Leap Motion体感控制器发来的手势动作信息帧后，对其进行解析，获取用户手势动作过程中的每一帧数据；

然后，比较前后帧数据的差异，生成用户手势动作信息，其中，用户手势动作信息根据不同的应用场景可以包括以下信息：平移运动参数、旋转运动参数、膨胀参数、变形参数以及方位参数中的一个或多个，当然还可以包括其他各种能判断手势动作的信息中的一个或多个，或者其他信息与上述各参数的组合等，在此不再列举。

之后，视频会议终端根据生成的用户手势动作信息确定用户的体感动作方式，比如：平移、旋转、抓取或者缩放等动作方式。而对于用户手持的工具，则可以识别出其长度、宽度、方向、位置和速度等。获取的这些手掌、手指和手持工具等的信息即可作为后续进一步体感动作控制使用。

之后，根据处理结果进行相应的GUI界面操作或输入。

首先，视频会议终端根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型。本实施例预先设定有一动作事件映射表，在该动作事件映射表种存储有设定的用户的体感动作方式及其对应的事件类型，比如，手指的左右上下平移、旋转、拖拽、抓取、伸张在屏幕上可能需要对应显示成屏幕的左右翻页、上下滚动，抓取文件或图标将其从一个地方拖到另一个地方，对文档或图片做放大或缩小显示，对桌面图标的点击等等。即需要将用户的体感动作方式转换为电视终端屏幕上对应的操作，从而精准、真实的实现手势原本想要达到的目的。

视频会议终端在获取到用户体感动作方式对应的事件类型后，视频会议终端中的软件系统根据对应的事件类型进行相应的GUI界面操作或输入，最终显示在显示设备上的效果比如为在电视屏幕进行左右翻页、上下滚动，抓取文件或图标将其从一个地方拖到另一个地方，对文档或图片做放大或缩小显示，对桌面图标的点击等。

视频会议终端会将体感控制事件执行结果输出至视频会议中的每一显示设备，显示设备根据视频会议终端的输出进行视频会议和GUI界面的显示。

以电视为例，作为用户体感动作的体现，电视在从视频会议终端接收到体感控制事件执行结果的输出信息后，根据手势的动作范围和电视机显示屏幕的大小，按比例生成显示信息，提交到上层GUI显示模块在屏幕上显示出真实手指、手持工具的图像。或者，由视频会议终端体现出用户的动作意图后，例如操作屏幕上关机按键的体感动作完成后，电视终端正常响应手势而安全关机。如图2所示，其为本实施例中带Leap Motion的会议电视的示意图。

更为具体地，如图9所示，所述处理模块402包括：解析单元4021、生成单元4022及判定单元4023，其中：

解析单元4021，用于对所述手势动作信息帧进行解析，获取用户手势动作对应的数据；

生成单元4022，用于根据获取的数据生成用户手势动作信息，所述用户手势动作信息根据不同的应用场景可以包括以下信息：平移运动参数、旋转运动参数、膨胀参数、变形参数以及方位参数等各种能判断手势动作的信息中的一个或多个，在此不再列举；

判定单元4023，用于根据所述用户手势动作信息确定用户的体感动作方式。

如图10所示，所述事件控制模块403包括：查找单元4031及发送单元4032，其中：

查找单元4031，用于根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型；

发送单元4032，用于通过所述视频会议终端中的软件系统根据获取的所述对应的事件类型进行相应的GUI界面操作或输入。

本实施例通过上述方案，通过在传统会议电视系统中加入Leap Motion等体感控制器硬件，通过体感控制器在视频会议过程中感应用户的手势动作信息帧，并发送至视频会议终端；视频会议终端接收到所述体感控制器发来的手势动作信息帧后，对手势动作信息帧进行解析，获取用户的体感动作方式；根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型，由视频会议终端中的软件系统根据获取的对应的事件类型进行相应的GUI界面操作或输入，使得视频会议的参与者完全脱离现有的遥控器、手写白板等工具，也不必局促于坐在电脑前讲解课件等现象，与会者仅仅只需通过手势隔空操作显示界面，由此，通过隔空的动作达到操作显示屏的目的。相比于目前传统的会议电视系统，除了给用户带来更方便舒适的人机交互方式和更自由的与会感受外，也提高了视频会议的灵活性、方便性与舒适性。

如图11所示，本发明另一实施例提出一种视频会议终端，在上述第一实施例的基础上，还包括：

配置模块400，用于配置用户的体感动作方式与对应的事件类型之间的动作事件映射表。

本实施例与上述第一实施例的区别在于，本实施例还包括配置用户的体感动作方式与对应的事件类型之间的动作事件映射表。

具体地，本实施例针对用户的每一体感动作方式设定有一对应的事件类型，并将设定的用户的体感动作方式及其对应的事件类型存储至动作事件映射表中，比如，手指的左右上下平移、旋转、拖拽、抓取、伸张在屏幕上可能需要对应显示成屏幕的左右翻页、上下滚动，抓取文件或图标将其从一个地方拖到另一个地方，对文档或图片做放大或缩小显示，对桌面图标的点击等等。即需要将用户的体感动作方式转换为电视终端屏幕上对应的操作，从而精准、真实的实现手势原本想要达到的目的。

后续，视频会议终端在获取到用户体感动作方式后，即可查找该动作事件映射表，获取对应的事件类型，之后视频会议终端中的软件系统即可根据对应的事件类型，进行相应的GUI界面操作或输入。

本实施例通过上述方案，通过设定用户的体感动作方式与对应的事件类型之间的动作事件映射表，并在传统会议电视系统中加入Leap Motion等体感控制器硬件，通过体感控制器在视频会议过程中感应用户的手势动作信息帧，并发送至视频会议终端；视频会议终端接收到所述体感控制器发来的手势动作信息帧后，对手势动作信息帧进行解析，获取用户的体感动作方式；根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型，视频会议终端中的软件系统根据获取的所述对应的事件类型进行相应的GUI界面操作或输入，使得视频会议的参与者完全脱离现有的遥控器、手写白板等工具，也不必局促于坐在电脑前讲解课件等现象，与会者仅仅只需通过手势隔空操作显示界面，相比于目前传统的会议电视系统，除了给用户带来更方便舒适的人机交互方式和更自由的与会感受外，也提高了视频会议的灵活性、方便性与舒适性。

如图12所示，本发明又一实施例提出一种视频会议终端，在上述第一实施例的基础上，还包括：

判断模块404，用于判断所述用户的体感动作方式对应的手势状态是否符合预设条件，若是，则由所述事件控制模块403中查找单元4031根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型，否则，不执行上述操作。

本实施例与上述第一实施例的区别在于，本实施例还包括对用户的体感动作方式对应的手势状态的判断，以防止用户的误操作。

例如，传统的鼠标操作中，鼠标被悬空后的移动在屏幕上是不表现出来的，同理，在本实施例中，也需要有这样的处理方式来实现操作者想移动双手但又不希望该移动表现在屏幕上的意图。

因此，可以针对用户的手势状态，约定一种标准条件，当用户的体感动作方式对应的手势状态符合预设条件时，根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型，以便视频会议终端中的软件系统根据获取的所述对应的事件类型进行相应的GUI界面操作或输入；否则，用户的体感动作方式对应的手势状态不符合预设条件时，不执行上述操作，使手势动作不在屏幕上显示或生效。

比如，可以设定以下条件，当检测到用户的手势类似握拳状态即没有手指指尖信息的时候，手势的移动不在屏幕上显示。从而避免了用户的误操作，提高了视频会议的有效性。

需要说明的是，上述图11与图12所示的实施例可以组合实施。

本实施例通过上述方案，通过在传统会议电视系统中加入Leap Motion等体感控制器硬件，通过体感控制器在视频会议过程中感应用户的手势动作信息帧，并发送至视频会议终端；视频会议终端接收到所述体感控制器发来的手势动作信息帧后，对手势动作信息帧进行解析，获取用户的体感动作方式；根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型，视频会议终端中的软件系统根据获取的所述对应的事件类型进行相应的GUI界面操作或输入，使得视频会议的参与者完全脱离现有的遥控器、手写白板等工具，也不必局促于坐在电脑前讲解课件等现象，与会者仅仅只需通过手势隔空操作显示界面，相比于目前传统的会议电视系统，除了给用户带来更方便舒适的人机交互方式和更自由的与会感受外，也提高了视频会议的灵活性、方便性与舒适性。此外，还可对用户的体感动作方式对应的手势状态进行判断，以防止用户的误操作，提高视频会议的有效性。

以上所述仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或流程变换，或直接或间接运用在其它相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (20)

1.一种视频会议体感控制方法，其特征在于，包括：

体感控制器在视频会议过程中感应获取用户的手势动作信息帧，并发送至视频会议终端；

所述视频会议终端接收到所述体感控制器发来的手势动作信息帧后，对所述手势动作信息帧进行处理；根据处理结果进行相应的GUI界面控制操作或输入。

2.根据权利要求1所述的方法，其特征在于，所述视频会议终端对所述手势动作信息帧进行处理的步骤包括：

所述视频会议终端对所述手势动作信息帧进行解析，获取用户手势动作对应的数据；

根据获取的数据生成用户手势动作信息，所述用户手势动作信息包括如下信息中的一个或多个：平移运动参数、旋转运动参数、膨胀参数、变形参数以及方位参数；

根据所述用户手势动作信息确定用户的体感动作方式。

3.根据权利要求2所述的方法，其特征在于，所述视频会议终端根据处理结果进行相应的GUI界面操作或输入的步骤包括：

所述视频会议终端根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型；

视频会议终端中的软件系统根据获取的所述对应的事件类型进行相应的GUI界面操作或输入。

4.根据权利要求1、2或3所述的方法，其特征在于，所述体感控制器在视频会议过程中感应获取用户的手势动作信息帧的步骤之前还包括：

所述视频会议终端配置用户的体感动作方式与对应的事件类型之间的动作事件映射表。

5.根据权利要求3所述的方法，其特征在于，所述视频会议终端根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型的步骤之前还包括：

所述视频会议终端判断所述用户的体感动作方式对应的手势状态是否符合预设条件，若是，则执行根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型的步骤。

6.一种视频会议体感控制方法，其特征在于，包括：

视频会议终端接收体感控制器发来的手势动作信息帧；

对所述手势动作信息帧进行处理；

根据处理结果进行相应的GUI界面操作或输入。

7.根据权利要求6所述的方法，其特征在于，所述对手势动作信息帧进行处理的步骤包括：

对所述手势动作信息帧进行解析，获取用户手势动作对应的数据；

根据获取的数据生成用户手势动作信息，所述用户手势动作信息包括如下信息中的一个或多个：平移运动参数、旋转运动参数、膨胀参数、变形参数以及方位参数；

根据所述用户手势动作信息确定用户的体感动作方式。

8.根据权利要求7所述的方法，其特征在于，所述根据处理结果进行相应的GUI界面操作或输入的步骤包括：

根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型；

通过视频会议终端中的软件系统根据获取的所述对应的事件类型进行相应的GUI界面操作或输入。

9.根据权利要求8所述的方法，其特征在于，所述根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型的步骤之前还包括：

配置用户的体感动作方式与对应的事件类型之间的动作事件映射表。

10.根据权利要求8或9所述的方法，其特征在于，所述根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型的步骤之前还包括：

判断所述用户的体感动作方式对应的手势状态是否符合预设条件，若是，则执行根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型的步骤。

11.一种视频会议体感控制系统，其特征在于，包括：体感控制器、视频会议终端以及至少一显示设备，所述视频会议终端分别与所述体感控制器及显示设备连接，其中：

所述体感控制器，用于在视频会议过程中感应获取用户的手势动作信息帧，并发送至所述视频会议终端；

所述视频会议终端，用于接收到所述体感控制器发来的手势动作信息帧后，对所述手势动作信息帧进行处理，并根据处理结果进行相应的GUI界面操作或输入；

所述显示设备，用于根据所述视频会议终端的输出进行视频会议和GUI界面的显示。

12.根据权利要求11所述的系统，其特征在于，

所述视频会议终端，还用于对所述手势动作信息帧进行解析，获取用户手势动作对应的数据,根据获取的数据生成用户手势动作信息；根据所述用户手势动作信息确定用户的体感动作方式。

13.根据权利要求11所述的系统，其特征在于，

所述视频会议终端，还用于根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型；通过所述视频会议终端中的软件系统根据获取的所述对应的事件类型进行相应的GUI界面操作或输入。

14.根据权利要求13所述的系统，其特征在于，

所述视频会议终端，还用于配置用户的体感动作方式与对应的事件类型之间的动作事件映射表。

15.根据权利要求13或14所述的系统，其特征在于，

所述视频会议终端，还用于判断所述用户的体感动作方式对应的手势状态是否符合预设条件，若是，则根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型。

16.一种视频会议终端，其特征在于，包括：

接收模块，用于接收体感控制器发来的手势动作信息帧；

处理模块，用于对所述手势动作信息帧进行处理；

事件控制模块，用于根据处理结果进行相应的GUI界面操作或输入。

17.根据权利要求16所述的视频会议终端，其特征在于，所述处理模块包括：

解析单元，用于对所述手势动作信息帧进行解析，获取用户手势动作对应的数据生成单元，用于根据获取的数据生成用户手势动作信息，所述用户手势动作信息包括如下信息中的一个或多个：平移运动参数、旋转运动参数、膨胀参数、变形参数以及方位参数；

判定单元，用于根据所述用户手势动作信息确定用户的体感动作方式。

18.根据权利要求16所述的视频会议终端，其特征在于，所述事件控制模块包括：

查找单元，用于根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型；

发送单元，用于通过所述视频会议终端中的软件系统根据获取的所述对应的事件类型进行相应的GUI界面操作或输入。

19.根据权利要求18所述的视频会议终端，其特征在于，还包括：

配置模块，用于配置用户的体感动作方式与对应的事件类型之间的动作事件映射表。

20.根据权利要求18或19所述的视频会议终端，其特征在于，还包括：

判断模块，用于判断所述用户的体感动作方式对应的手势状态是否符合预设条件，若是，则由所述查找单元根据用户的体感动作方式查找预设的动作事件映射表，获取对应的事件类型。