CN113747106A - 一种视频会议时对终端的控制方法、装置及系统 - Google Patents

Abstract

本发明实施例提供一种视频会议时对终端的控制方法、装置及系统，包括获取成像区域内第一部分内的与会人员图像；分析获得与会人员图像中的肢体动作；执行肢体动作所对应的视频会议交互指令。该控制方法通过获取成像区域内第一部分内的与会人员图像，再分析获得与会人员图像中的肢体动作，执行肢体动作所对应的视频会议交互指令；有效提高了用户在视频会议过程中的动作被精准识别为视频会议交互指令的可能性，并有效避免了其他与会人员受到其干扰的可能。

Description

一种视频会议时对终端的控制方法、装置及系统

技术领域

本发明涉及视频会议技术领域，具体而言，涉及一种一种视频会议时对终端的控制方法、装置及系统。

背景技术

随着线上视频会议应用越来越广泛，用户对于线上视频会议的功能要求也越来越高。通常用户在进行视频会议时，一般会打开移动终端（如平板电脑、智能手机等）的摄像头，通过摄像头和麦克风捕捉与会人员的图像和声音，并将其发送给其他与会终端以完成视频会议。

一般情况下，当用户要对视频会议终端进行操作或交互操作时，通常需要对正在进行录像录音的终端进行操作，有可能会造成画面跳出、画面抖动、杂音等现象，这会对其他与会人员造成不好的会议体验。因此，需要一种能够在不影响其他与会人员的参会体验的情况下，依然能够完成需要的交互的方法和装置。

发明内容

为了至少克服现有技术中的上述不足，本发明的目的在于提供一种一种视频会议时对终端的控制方法、装置及系统。

第一方面，本发明提供一种视频会议时对终端的控制方法，包括：

获取成像区域内第一部分内的与会人员图像；

分析获得所述与会人员图像中的肢体动作；

执行所述肢体动作所对应的视频会议交互指令。

第二方面，本发明提供一种视频会议时对终端的控制装置，所述装置包括：

采集单元，用于获取成像区域内第一部分内的与会人员图像；

处理单元，分析获得所述与会人员图像中的肢体动作；

执行单元，执行所述肢体动作所对应的视频会议交互指令。

第三方面，本发明实施例还提供一种视频会议时对终端的控制系统，该系统包含视频会议时对终端的控制装置以及云会议服务器，所述云会议服务器包括处理器、机器可读存储介质和网络接口，所述机器可读存储介质、所述网络接口以及所述处理器之间通过总线系统相连，所述网络接口用于与至少一个视频会议与会用户终端通信连接，所述机器可读存储介质用于存储程序、指令或代码，所述处理器用于执行所述机器可读存储介质中的程序、指令或代码，以执行第一方面或者第一方面中任意一个可能的设计中的视频会议时对终端的控制方法。

第四方面，本发明实施例提供一种计算机可读存储介质，计算机可读存储介质中存储有指令，当其被执行时，使得计算机执行上述第一方面或者第一方面中任意一个可能的设计中的视频会议时对终端的控制方法。

基于上述任意一个方面，本发明通过获取成像区域内第一部分内的与会人员图像，再分析获得与会人员图像中的肢体动作，执行肢体动作所对应的视频会议交互指令；使用户仅在成像区域内第一部分内的动作，才会别识别为视频会议交互指令，有效提高了用户在视频会议过程中的动作被精准识别为视频会议交互指令的可能性。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它相关的附图。

图1为本发明实施例提供的视频会议时对终端的控制系统的应用场景示意图；

图2为本发明实施例提供的视频会议时对终端的控制方法的流程示意图；

图3为本发明实施例提供的视频会议时对终端的控制装置的功能模块示意图；

图4为本发明实施例提供的用于实现上述的视频会议时对终端的控制方法的云会议服务器的结构示意框图。

具体实施方式

下面结合说明书附图对本发明进行具体说明，方法实施例中的具体操作方法也可以应用于装置实施例或系统实施例中。

图1是本发明一种实施例提供的视频会议时对终端的控制系统10的交互示意图。视频会议时对终端的控制系统10可以包括云会议服务器100以及与所述云会议服务器100通信连接的视频会议与会用户终端200。图1所示的视频会议时对终端的控制系统10仅为一种可行的示例，在其它可行的实施例中，该视频会议时对终端的控制系统10也可以仅包括图1所示组成部分的其中一部分或者还可以包括其它的组成部分。

本实施例中，视频会议与会用户终端200可以包括移动设备、平板计算机、膝上型计算机等或其任意组合。在一些实施例中，移动设备可以包括智能家居设备、可穿戴设备、智能移动设备、虚拟现实设备、或增强现实设备等，或其任意组合。在一些实施例中，智能家居设备可以包括智能电器设备的控制设备、智能监控设备、智能电视、智能摄像机等，或其任意组合。在一些实施例中，可穿戴设备可包括智能手环、智能鞋带、智能玻璃、智能头盔、智能手表、智能服装、智能背包、智能配件等，或其任何组合。在一些实施例中，智能移动设备可以包括智能手机、个人数字助理、游戏设备等，或其任意组合。在一些实施例中，虚拟现实设备和/或增强现实设备可以包括虚拟现实头盔、虚拟现实玻璃、虚拟现实贴片、增强现实头盔、增强现实玻璃、或增强现实贴片等，或其任意组合。例如，虚拟现实设备和/或增强现实设备可以包括各种虚拟现实产品等。

本实施例中，视频会议时对终端的控制系统10中的物联网云云会议服务器100和视频会议与会用户终端200可以通过配合执行以下方法实施例所描述的视频会议时对终端的控制方法，具体云会议服务器100和视频会议与会用户终端200的执行步骤部分可以参照以下方法实施例的详细描述。

为了解决前述背景技术中的技术问题，图2为本发明实施例提供的视频会议时对终端的控制方法的流程示意图，本实施例提供的视频会议时对终端的控制方法可以由图1中所示的云会议服务器100执行，下面对该视频会议时对终端的控制方法进行详细介绍。

步骤S110，获取成像区域内第一部分内的与会人员图像；

步骤S120，分析获得所述与会人员图像中的肢体动作；

步骤S130，执行所述肢体动作所对应的视频会议交互指令。

在一个可能的实施例中，所述成像区域内第一部分设置在摄像头捕捉的图像的上半部分范围内

在一个可能的实施例中，所述与会人员图像中具有多个肢体动作且所述多个肢体动作为不同姿态的动作，或者，所述与会人员图像中仅具有一个肢体动作。

在一个可能的实施例中，步骤S130之前，还包括：

步骤S121，基于确定的视频会议交互指令向视频会议主持人端发出确认请求并接收视频会议主持人端的确认反馈。

在一个可能的实施例中，步骤S130之后，还包括：

步骤S140，当检测到有肢体动作出现在成像区域内第二部分时，获取成像区域内第一部分内的与会人员图像；所述成像区域内第二部分包含所述成像区域内第一部分，或所述成像区域内第二部分与所述成像区域内第一部分存在部分重叠。

在一个可能的实施例中，步骤S130进一步包括：

步骤S131，当所述肢体动作的关节点之间的关联信息与预设的关节关联信息匹配时，执行所述关节点之间的关联信息对应的视频会议交互指令。

在一个可能的实施例中，步骤S130进一步包括：

步骤S132，当所述肢体动作的移动速率信息与预设的移动速率信息匹配时，生成关节运动信息；

步骤S133，执行所述关节运动信息对应的视频会议交互指令。图3为本发明实施例提供的视频会议时对终端的控制装置300的功能模块示意图，本实施例可以根据上述云会议服务器100执行的方法实施例对该视频会议时对终端的控制装置300进行功能模块的划分，也即该视频会议时对终端的控制装置300所对应的以下各个功能模块可以用于执行上述云会议服务器100执行的各个方法实施例。其中，该视频会议时对终端的控制装置300可以包括采集单元310、处理单元320、和执行单元330，下面分别对该视频会议时对终端的控制装置300的各个功能模块的功能进行详细阐述。

采集单元310可以用于执行上述的步骤S110，即用于获取成像区域内第一部分内的与会人员图像。

处理单元320可以用于执行上述的步骤S120，即用于分析获得所述与会人员图像中的肢体动作。

执行单元330可以用于执行上述的步骤S130，即用于执行所述肢体动作所对应的视频会议交互指令。

需要说明的是，应理解以上装置的各个模块的划分仅仅是一种逻辑功能的划分，实际实现时可以全部或部分集成到一个物理实体上，也可以物理上分开。且这些模块可以全部以软件通过处理元件调用的形式实现；也可以全部以硬件的形式实现；还可以部分模块通过处理元件调用软件的形式实现，部分模块通过硬件的形式实现。例如，采集单元310可以为单独设立的处理元件，也可以集成在上述装置的某一个芯片中实现，此外，也可以以程序代码的形式存储于上述装置的存储器中，由上述装置的某一个处理元件调用并执行以上采集单元310的功能。其它模块的实现与之类似。此外这些模块全部或部分可以集成在一起，也可以独立实现。这里所描述的处理元件可以是一种集成电路，具有信号的处理能力。在实现过程中，上述方法的各步骤或以上各个模块可以通过处理器元件中的硬件的集成逻辑电路或者软件形式的指令完成。

例如，以上这些模块可以是被配置成实施以上方法的一个或多个集成电路，例如：一个或多个特定集成电路(application specific integrated circuit，ASIC)，或，一个或多个微处理器(digital signal processor，DSP)，或，一个或者多个现场可编程门阵列(field programmable gate array，FPGA)等。再如，当以上某个模块通过处理元件调度程序代码的形式实现时，该处理元件可以是通用处理器，例如中央处理器(centralprocessing unit，CPU)或其它可以调用程序代码的处理器。再如，这些模块可以集成在一起，以片上系统(system-on-a-chip，SOC)的形式实现。

图4示出了本发明实施例提供的用于实现上述的控制设备的云会议服务器100的硬件结构示意图，如图4所示，云会议服务器100可包括处理器110、机器可读存储介质120、总线130以及收发器140。

在具体实现过程中，至少一个处理器110执行所述机器可读存储介质120存储的计算机执行指令（例如图3中所示的视频会议时对终端的控制装置300包括的），使得处理器110可以执行如上方法实施例的视频会议时对终端的控制方法，其中，处理器110、机器可读存储介质120以及收发器140通过总线130连接，处理器110可以用于控制收发器140的收发动作，从而可以与前述的视频会议与会用户终端200进行数据收发。

处理器110的具体实现过程可参见上述云会议服务器100执行的各个方法实施例，其实现原理和技术效果类似，本实施例此处不再赘述。

在上述的图4所示的实施例中，应理解，处理器可以是中央处理单元(英文：Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(英文：Digital Signal Processor，DSP)、专用集成电路(英文：ApplicationSpecificIntegrated Circuit，ASIC)等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合发明所发明的方法的步骤可以直接体现为硬件处理器执行完成，或者用处理器中的硬件及软件模块组合执行完成。

机器可读存储介质120可能包含高速RAM存储器，也可能还包括非易失性存储NVM，例如至少一个磁盘存储器。

总线130可以是工业标准体系结构(Industry Standard Architecture，ISA)总线、外部设备互连(Peripheral Component Interconnect，PCI)总线或扩展工业标准体系结构(Extended Industry Standard Architecture，EISA)总线等。总线130可以分为地址总线、数据总线、控制总线等。为便于表示，本申请附图中的总线并不限定仅有一根总线或一种类型的总线。

此外，本发明实施例还提供一种可读存储介质，所述可读存储介质中存储有计算机执行指令，当处理器执行所述计算机执行指令时，实现如上视频会议时对终端的控制方法。

上述的可读存储介质可以是由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。可读存储介质可以是通用或专用计算机能够存取的任何可用介质。

最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (8)

1.一种视频会议时对终端的控制方法，其特征在于，包括：

获取成像区域内第一部分内的与会人员图像；

分析获得所述与会人员图像中的肢体动作；

执行所述肢体动作所对应的视频会议交互指令。

2.根据权利要求1所述的控制方法，其特征在于，所述成像区域内第一部分设置在摄像头捕捉的图像的上半部分范围内。

3.根据权利要求1所述的控制方法，其特征在于，所述与会人员图像中具有多个肢体动作且所述多个肢体动作为不同姿态的动作，或者，所述与会人员图像中仅具有一个肢体动作。

4.根据权利要求1所述的控制方法，其特征在于，执行所述视频会议交互指令前，还包括：

基于确定的视频会议交互指令向视频会议主持人端发出确认请求并接收视频会议主持人端的确认反馈。

5.根据权利要求1所述的控制方法，其特征在于，

当检测到有肢体动作出现在成像区域内第二部分时，获取成像区域内第一部分内的与会人员图像；所述成像区域内第二部分包含所述成像区域内第一部分，或所述成像区域内第二部分与所述成像区域内第一部分存在部分重叠；

执行所述肢体动作所对应的视频会议交互指令，包括：

当所述肢体动作的关节点之间的关联信息与预设的关节关联信息匹配时，执行所述关节点之间的关联信息对应的视频会议交互指令；

执行所述肢体动作所对应的视频会议交互指令，包括：

当所述肢体动作的移动速率信息与预设的移动速率信息匹配时，生成关节运动信息；

执行所述关节运动信息对应的视频会议交互指令。

6.一种视频会议时对终端的控制装置，其特征在于，所述装置包括：

采集单元，用于获取成像区域内第一部分内的与会人员图像；

处理单元，用于分析获得所述与会人员图像中的肢体动作；

执行单元，用于执行所述肢体动作所对应的视频会议交互指令。

7.一种视频会议时对终端的控制系统，该系统包含视频会议时对终端的控制装置以及云会议服务器，其特征在于，所述云会议服务器包括处理器、机器可读存储介质和网络接口，所述机器可读存储介质、所述网络接口以及所述处理器之间通过总线系统相连，所述网络接口用于与至少一个视频会议与会用户终端通信连接，所述机器可读存储介质用于存储程序、指令或代码，所述处理器用于执行所述机器可读存储介质中的程序、指令或代码，以执行权利要求1-5中任意一项的视频会议时对终端的控制方法。

8.一种计算机可读存储介质，用于存储指令/可执行代码，当所述指令/可执行代码被电子设备的处理器执行时，使得所述电子设备实现权利要求1-5中任一项所述的方法。

Images