CN113507586A - 智能会议系统、用于智能会议的信息处理方法 - Google Patents

Abstract

本公开实施例公开了一种智能会议、用于智能会议的信息处理方法，其中智能会议包括语音采集单元，采集与会发言人的语音信号，并将语音信号传输至计算单元；图像采集单元，采集与会人员的图像信号，并将图像信号传输至计算单元；信息输入接口单元，与外接输入设备连接，并将外接输入设备输入的信息信号传输至计算单元；投影单元，接收计算单元传输的信号，并对信号进行投射；声音输出单元，输出语音信号，通过包括分别与计算单元电连接的语音采集单元、图像采集单元、信息输入接口单元、投影单元和声音输出单元，各个单元集成在系统上简化了会议流程。

Description

智能会议系统、用于智能会议的信息处理方法

技术领域

本公开涉及数据处理技术领域，具体涉及到一种智能会议系统、用于智能会议的信息处理方法。

背景技术

目前的会议系统，一般包括独立割裂设置的投影(或电视)、摄像头、麦克风等组成，会议开始前需要繁琐的设置、连接等步骤，会议流程复杂。

发明内容

本公开的主要目的在于提供一种智能会议系统、用于智能会议系统的信息处理方法。

为了实现上述目的，根据本公开的第一方面，提供了一种智能会议系统，包括：分别与计算单元电连接的语音采集单元、图像采集单元、信息输入接口单元、投影单元和声音输出单元，各个单元集成在所述系统上；所述语音采集单元，采集与会发言人的语音信号，并将所述语音信号传输至所述计算单元，以使所述计算单元在对所述语音信号进行处理后，确定所述语音信号的声源位置；所述图像采集单元，采集与会人员的图像信号，并将所述图像信号传输至所述计算单元，以使所述计算单元基于所述声源位置，对所述图像信号进行处理；所述信息输入接口单元，与外接输入设备连接，并将外接输入设备输入的信息信号传输至所述计算单元；所述投影单元，接收所述计算单元传输的信号，并对所述信号进行投射；其中，所述传输单元传输的信号包括与会人员的图像信号、所述处理后的图像信号、和/或外接输入设备输入的信息信号；所述声音输出单元，输出所述语音信号。

可选地，系统还集成存储单元，在计算单元的控制下，存储不同与会发言人的语音信号；和/或，在计算单元将所述语音信号转换为文本后，存储所述文本。

可选地，系统还包括蓝牙无线连接单元，通过所述蓝牙无线连接单元，所述智能会议系统与目标外接设备连接，以将所述声源信号、所述视频信号中的声音输出至所述目标连接设备；通过所述蓝牙无线连接单元，所述智能会议系统与目标智能会议系统连接，和/或，通过所述蓝牙无线连接单元与蓝牙设备连接。

可选地，系统还包括WiFi无线连接单元，所述系统通过所述WiFi无线连接单元接收外接设备的发送的投屏信息，并通过所述投影单元进行投影；和/或，通过所述WiFi无线连接单元向目标用户端发送所述投影单元投射的信号。

可选地，图像采集单元还采集手势运动图像信号，并将所述手势运动图像信号传输至所述计算单元，以使所述计算单元对手势进行识别，而建立交互通信。

可选地，系统还集成按键单元，当所述按键单元的按键被触发产生触发信号后，将所述触发信号传输至所述计算单元，以使所述投影单元在所述计算单元的控制下对投影信号进行控制。

可选地，系统还集成输入设备接口，通过所述输入设备接口建立所述系统与所述输入设备的交互通道，所述输入设备接口包括鼠标输入接口、键盘输入接口、和/或遥控器输入接口。

可选地，系统还集成电池，所述电池通过可拆卸的方式与所述系统集成。

根据本公开的第二方面，提供了一种用于智能会议的信息处理方法，包括：在采集到声源信号后，对所述声源信号进行处理，确定声源位置信息；采集与会人员图像信息；基于所述声源位置信息生成处理信号，以对所述与会人员的图像信息进行处理，得到目标图像；接收输入设备输入的会议信息；对所述目标图像、和/或会议信息进行投影。

可选地，还包括：接收图像采集装置采集的手势运动图像；对所述手势运动图像的手势进行识别，得到控制指令。

在本公开实施例智能会议系统中，包括分别与计算单元电连接的语音采集单元、图像采集单元、信息输入接口单元、投影单元和声音输出单元，各个单元集成在所述系统上，简化了会议流程，并可通过计算单元对声源进行定位、与会人员识别实现了会议的智能化。

附图说明

为了更清楚地说明本公开具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本公开的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是根据本公开实施例的智能会议系统的结构图；

图2是根据本公开实施例的用于智能会议的信息处理方法流程图；

图3是根据本公开实施例的电子设备的示意图。

具体实施方式

为了使本技术领域的人员更好地理解本公开方案，下面将结合本公开实施例中的附图，对本公开实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本公开一部分的实施例，而不是全部的实施例。基于本公开中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本公开保护的范围。

需要说明的是，本公开的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本公开的实施例。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

在本公开中，术语“上”、“下”、“左”、“右”、“前”、“后”、“顶”、“底”、“内”、“外”、“中”、“竖直”、“水平”、“横向”、“纵向”等指示的方位或位置关系为基于附图所示的方位或位置关系。这些术语主要是为了更好地描述本公开及其实施例，并非用于限定所指示的装置、元件或组成部分必须具有特定方位，或以特定方位进行构造和操作。

并且，上述部分术语除了可以用于表示方位或位置关系以外，还可能用于表示其他含义，例如术语“上”在某些情况下也可能用于表示某种依附关系或连接关系。对于本领域普通技术人员而言，可以根据具体情况理解这些术语在本公开中的具体含义。

此外，术语“安装”、“设置”、“设有”、“连接”、“相连”、“套接”应做广义理解。例如，可以是固定连接，可拆卸连接，或整体式构造；可以是机械连接，或电连接；可以是直接相连，或者是通过中间媒介间接相连，又或者是两个装置、元件或组成部分之间内部的连通。对于本领域普通技术人员而言，可以根据具体情况理解上述术语在本公开中的具体含义。

需要说明的是，在不冲突的情况下，本公开中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本公开。

根据本公开实施例，提供了一种智能会议系统，如图1所示，该系统包括分别与计算单元101电连接的语音采集单元102、图像采集单元103、信息输入接口单元104、投影单元105和声音输出单元106，各个单元集成在所述系统上；

语音采集单元102，采集与会发言人的语音信号，并将语音信号传输至计算单元101，以使计算单元101在对语音信号进行处理后，确定语音信号的声源位置；

在本实施例中，语音采集单元102可以是麦克风、或者麦克风阵列，可以采集与会发言人的语音信号，并将采集的信号发送至计算单元101。计算单元101在接收到语音信号后，可以对其进行降噪运算和声源定位处理，以确定语音信号的声源位置。处理方法可以是公开的技术，例如，音源定位、回声消除、降噪等等；还可以是未公开的定位技术。

系统还集成图像采集单元103，采集与会人员的图像信号，并将图像信号传输至所述计算单元101，以使计算单元101基于声源位置，对图像信号进行处理。

在本实施例中，图像采集单元103可以包括摄像头，系统可以集成摄像头实现对与会人员图像的采集，并将采集的图像传输至计算单元103，计算单元可以基于声源位置，在采集的图像中对发言人进行定位，并在图像中进行区分显示，包括不限于高亮显示、放大显示、标记等，该过程可以基于图像识别技术和声源定位技术实现。

具体地，摄像头可以是一个或多个摄像头，类型可以包括360度环视摄像头，可以对参会人员的图像进行采集。摄像头可旋转，以获得更好的采集角度。

更具体地，摄像头也可以对投影单元的投射内容进行采集，以自动对焦和图像畸变校正。

图像采集单元101还可以利用图像识别技术对采集的图像进行处理，利用人脸识别技术分别对图像中的与会人员进行自动区分显示。

作为本实施例一种可选的实现方式，系统还集成存储单元(未在图中示出)，在计算单元101的控制下，存储不同与会发言人的语音信号；和/或，在所述计算单元将所述语音信号转换为文本后，存储所述文本。

在本可选的是实现方式中，实现了会议记录功能，节省了会议后整理的过程。在计算单元101的控制下，可以存储参会人员的语音，并转换为文本。在计算单元101的控制下还可通过麦克风阵列系统采集的音频数据进行声源定位，和/或，通过摄像头采集的视频数据配合人脸识别及嘴部动作识别区分不同的发言人，并将发言人、发言人的语音记性对应存储。

系统还集成了信息输入接口单元104，与外接输入设备连接，并将外接输入设备输入的信息信号传输至所述计算单元。

在本实施例中，信息输入接口单元可以是视频输入接口单元、或者其他媒体类型的输入接口单元，包括但是不限于HDMI、DP、VGA等，实现其他设备(例如，电脑、平板、手机等等)的视频、或其他信息的接入，以最终实现信息的投射显示。当系统检测到其他设备视频、或其他信息接入时，能够切换视频、或其他信息的显示。

系统还集成了投影单元105，接收计算单元101传输的信号，并对信号进行投射；其中，传输单元传输的信号包括与会人员的图像信号、处理后的图像信号、和/或外接输入设备输入的信息信号；

在本实施例中，投影单元105用于对会议内容进行投射，投影的内容可以包括与会人员的视频图像、对与会人员图像中的发言人进行区分显示后的视频图像、或者输入的视频图像以及输入的其他内容的信息进行投射。

可以理解的是，最终的投影对象可以是独立于本系统的任意显示装置，在此不做限定。

系统还集成声音输出单元106，输出语音信号。

在本实施例中，声音输出单元106可以包括扬声器，实现对音频的播放功能。

作为本实施例一种可选的实现方式，系统还包括蓝牙无线连接单元(图中未示出)，通过蓝牙无线连接单元，智能会议系统与目标外接设备连接，以将声源信号、视频信号中的声音输出至所述目标连接设备；通过所述蓝牙无线连接单元，所述智能会议系统与目标智能会议系统连接；和/或，通过所述蓝牙无线连接单元与蓝牙设备连接。

在本可选的实现方式中，蓝牙模块可以连接外接设备，如手机、平板、电脑、蓝牙音箱等，实现音频的输出。

对于较大的会议室，也可以连接另一个智能会议系统，实现更好的音频采集和输出功能，在该场景下智能会议系统的蓝牙无线连接单元可以作为发送方Source，另一个目标智能会议系统的蓝牙无线连接单元可以作为接收方Sink，可以理解的是，除蓝牙无线连接单元外，还可以采用包括但是不限于HFP协议、自定义拓展协议等。

智能会议系统还可以通过蓝牙无线连接单元，自动搜索周围的设备，当发现距离较近的可用的蓝牙设备时，可以提示是否连接，用户确认后连接目标设备，降低用户使用的门槛。

作为本实施例一种可选的实现方式，系统还包括WiFi无线连接单元，所述系统通过所述WiFi无线连接单元接收外接设备的发送的投屏信息，并通过所述投影单元进行投影；和/或，通过所述WiFi无线连接单元向目标用户端发送所述投影单元投射的信号。

在本可选的实现方式中，WiFi无线连接模块可以与外接设备连接，接收投屏信息(会议内容)，以最终通过投影单元对会议内容进行投屏显示。WiFi无线连接单元还可以与用户端连接，将投射的内容及麦克风拾取的音频实时分享给远程参会的人员的用户端。WiFi模块可以连接到WiFi网络，实现系统的上网相关的功能。

作为本实施例一种可选的实现方式，图像采集单元103还采集手势运动图像信号，并将所述手势运动图像信号传输至所述计算单元101，以使所述计算单元101对手势进行识别，而建立交互通信。

在本可选的实现方式中，可通过摄像头对手势图像进行采集，在计算单元101的控制下，实现人与系统的手势交互，从而实现对系统的操作功能，包括不限于设置参数、调节功能(包括不限于音量、亮度等)等。

作为本实施一种可选的实现方式，系统还集成按键单元，当所述按键单元的按键被触发产生触发信号后，将所述触发信号传输至所述计算单元101，以使所述投影单元105在所述计算单元101的控制下对投影信号进行控制。

在本可选的实现方式中，按键包括但是不限于开关、音量调节、视频输入切换等，通过触发按键产生触发信号后，在计算单元101的控制下对投影的音频、视频进行控制。

作为本实施例一种可选的实现方式，系统还集成输入设备接口，通过所述输入设备接口建立所述系统与所述输入设备的交互通道，所述输入设备接口包括鼠标输入接口、键盘输入接口、和/或遥控器输入接口。

在本可选的实现方式中，通过输入设备接口，可以建立与输入设备的交互通道，从而实现了通过鼠标、键盘、遥控器等等设备可以实现文本输入、界面操作、设置修改、投射内容标注等操作。

作为本实施例一种可选的实现方式，系统还集成电池，所述电池通过可拆卸的方式与所述系统集成。

通过电池可以给整个智能会议系统供电，若系统安装了电池，可以随时使用会议系统，使用更加便捷。

本实施例简化了会议流程，并集成了会议记录等功能，节省了会议后整理的过程。

根据本公开实施例，还提供了一种用于智能会议的信息处理方法，实施本方法的系统可以包括分别与计算单元电连接的语音采集单元、图像采集单元、信息输入接口单元、投影单元和声音输出单元，各个单元集成在系统上；语音采集单元，采集与会发言人的语音信号，并将语音信号传输至计算单元，以使计算单元在对语音信号进行处理后，确定语音信号的声源位置；图像采集单元，采集与会人员的图像信号，并将图像信号传输至计算单元，以使计算单元基于声源位置，对图像信号进行处理；信息输入接口单元，与外接输入设备连接，并将外接输入设备输入的信息信号传输至计算单元；投影单元，接收计算单元传输的信号，并对信号进行投射；其中，传输单元传输的信号包括与会人员的图像信号、处理后的图像信号、和/或外接输入设备输入的信息信号；声音输出单元，输出语音信号。

如图2所示，该用于智能会议的信息处理方法包括：

步骤201：在采集到声源信号后，对所述声源信号进行处理，确定声源位置信息；

步骤202：采集与会人员图像信息；

步骤203：基于所述声源位置信息生成处理信号，以对所述与会人员的图像信息进行处理，得到目标图像；

在本实施例中，可以根据摄像头采集的图像数据，按照参会人员自动区分显示，并且可以根据图像识别技术和声源定位技术确认当前发言的人，做到区分显示，包括不限于高亮显示、放大显示、标记等。

步骤204：接收输入设备输入的会议信息；

在本实施例中，会议信息可以是视频类型的信息、或者其他媒体类型的信息。

步骤205：对所述目标图像、和/或会议信息进行投影。

作为本实施例一种可选的实现方式，方法还包括：接收图像采集装置采集的手势运动图像；对所述手势运动图像的手势进行识别，得到控制指令；和/或，采集激光笔、翻页器等设备在投影图像上的亮斑，形成标注图像，用于突出显示。

方法还包括：通过输入设备接口建立系统与输入设备的交互通道，接收输入设备输入的控制信号，输入设备接口包括鼠标输入接口、键盘输入接口、和/或遥控器输入接口，通过输入设备接口，可以建立与输入设备的交互通道，从而实现了通过鼠标、键盘、遥控器等等设备可以实现文本输入、界面操作、设置修改、投射内容标注等操作。

本实施例中的实现方式与智能会议系统中的实施例类似，再次不再赘述。

本公开实施例提供了一种电子设备，如图3所示，该电子设备包括一个或多个处理器31以及存储器32，图3中以一个处理器31为例。

该控制器还可以包括：输入装置33和输出装置34。

处理器31、存储器32、输入装置33和输出装置34可以通过总线或者其他方式连接，图3中以通过总线连接为例。

处理器31可以为中央处理器(CentralProcessingUnit，CPU)。处理器31还可以为其他通用处理器、数字信号处理器(DigitalSignalProcessor，DSP)、专用集成电路(ApplicationSpecificIntegratedCircuit，ASIC)、现场可编程门阵列(Field-ProgrammableGateArray，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等芯片，或者上述各类芯片的组合。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

存储器32作为一种非暂态计算机可读存储介质，可用于存储非暂态软件程序、非暂态计算机可执行程序以及模块，如本公开实施例中的控制方法对应的程序指令/模块。处理器31通过运行存储在存储器32中的非暂态软件程序、指令以及模块，从而执行服务器的各种功能应用以及数据处理，即实现上述方法实施例的用于智能会议的信息处理方法。

存储器32可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储根据服务器操作的处理装置的使用所创建的数据等。此外，存储器32可以包括高速随机存取存储器，还可以包括非暂态存储器，例如至少一个磁盘存储器件、闪存器件、或其他非暂态固态存储器件。在一些实施例中，存储器32可选包括相对于处理器31远程设置的存储器，这些远程存储器可以通过网络连接至网络连接装置。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

输入装置33可接收输入的数字或字符信息，以及产生与服务器的处理装置的用户设置以及功能控制有关的键信号输入。输出装置34可包括显示屏等显示设备。

一个或者多个模块存储在存储器32中，当被一个或者多个处理器31执行时，执行如图1所示的方法。

本领域技术人员可以理解，实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各电机控制方法的实施例的流程。其中，存储介质可为磁碟、光盘、只读存储记忆体(Read-OnlyMemory，ROM)、随机存储记忆体(RandomAccessMemory，RAM)、快闪存储器(FlashMemory)、硬盘(HardDiskDrive，缩写：HDD)或固态硬盘(Solid-StateDrive，SSD)等；存储介质还可以包括上述种类的存储器的组合。

虽然结合附图描述了本公开的实施方式，但是本领域技术人员可以在不脱离本公开的精神和范围的情况下作出各种修改和变型，这样的修改和变型均落入由所附权利要求所限定的范围之内。

Claims (10)

1.一种智能会议系统，其特征在于，包括分别与计算单元电连接的语音采集单元、图像采集单元、信息输入接口单元、投影单元和声音输出单元，各个单元集成在所述系统上；

所述语音采集单元，采集与会发言人的语音信号，并将所述语音信号传输至所述计算单元，以使所述计算单元在对所述语音信号进行处理后，确定所述语音信号的声源位置；

所述图像采集单元，采集与会人员的图像信号，并将所述图像信号传输至所述计算单元，以使所述计算单元基于所述声源位置，对所述图像信号进行处理；

所述信息输入接口单元，与外接输入设备连接，并将外接输入设备输入的信息信号传输至所述计算单元；

所述投影单元，接收所述计算单元传输的信号，并对所述信号进行投射；其中，所述传输单元传输的信号包括与会人员的图像信号、所述处理后的图像信号、和/或外接输入设备输入的信息信号；

所述声音输出单元，输出所述语音信号。

2.根据权利要求1所述的智能会议系统，其特征在于，所述系统还集成存储单元，在计算单元的控制下，存储不同与会发言人的语音信号；和/或，

在所述计算单元将所述语音信号转换为文本后，存储所述文本。

3.根据权利要求1所述的智能会议系统，其特征在于，所述系统还包括蓝牙无线连接单元，通过所述蓝牙无线连接单元，所述智能会议系统与目标外接设备连接，以将所述声源信号、所述视频信号中的声音输出至所述目标连接设备；

通过所述蓝牙无线连接单元，所述智能会议系统与目标智能会议系统连接；

和/或，通过所述蓝牙无线连接单元与蓝牙设备连接。

4.根据权利要求1所述的智能会议系统，其特征在于，所述系统还包括WiFi无线连接单元，所述系统通过所述WiFi无线连接单元接收外接设备的发送的投屏信息，并通过所述投影单元进行投影；和/或，

通过所述WiFi无线连接单元向目标用户端发送所述投影单元投射的信号。

5.根据权利要求1所述的智能会议系统，其特征在于，所述图像采集单元还采集手势运动图像信号，并将所述手势运动图像信号传输至所述计算单元，以使所述计算单元对手势进行识别，而建立交互通信。

6.根据权利要求1所述的智能会议系统，其特征在于，所述系统还集成按键单元，当所述按键单元的按键被触发产生触发信号后，将所述触发信号传输至所述计算单元，以使所述投影单元在所述计算单元的控制下对投影信号进行控制。

7.根据权利要求1所述的智能会议系统，其特征在于，所述系统还集成输入设备接口，通过所述输入设备接口建立所述系统与所述输入设备的交互通道，所述输入设备接口包括鼠标输入接口、键盘输入接口、和/或遥控器输入接口。

8.根据权利要求1所述的智能会议系统，其特征在于，所述系统还集成电池，所述电池通过可拆卸的方式与所述系统集成。

9.一种用于智能会议的信息处理方法，其特征在于，包括：

在采集到声源信号后，对所述声源信号进行处理，确定声源位置信息；

采集与会人员图像信息；

基于所述声源位置信息生成处理信号，以对所述与会人员的图像信息进行处理，得到目标图像；

接收输入设备输入的会议信息；

对所述目标图像、和/或会议信息进行投影。

10.根据权利要求9所述的用于智能会议的信息处理方法，其特征在于，还包括：

接收图像采集装置采集的手势运动图像；

对所述手势运动图像的手势进行识别，得到控制指令；和/或，

采集激光笔、翻页器等设备在投影图像上的亮斑，形成标注图像，用于突出显示。

Images